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软件 测试 


随 着 信息 技术 的 飞速 发 展 ,软件 在 社会 生活 的 方方面面 发 挥 着 日 益 重 要 的 作用 。 软 
件 的 复杂 性 不 断 增 大 ,开发 周期 有 限 , 这 些 都 导致 了 软件 质量 时 常 得 不 到 保证 。 如 何 提 高 
软件 开发 的 质量 呢 ? 除了 按照 软件 工程 的 过 程 和 方法 论 去 优化 需求 分 析 、` 设 计 、 编 程 外 ， 
通过 软件 测试 发 现 软件 中 的 缺陷 并 进行 修复 显然 是 提升 软件 质量 的 重要 途径 。 

软件 测试 作为 软件 开发 中 的 一 个 重要 环节 ,已 逐渐 形成 一 门 新 的 学 科 和 产业 。2003 年 
10 月 ,国家 人 事 部 和 信息 产业 部 联合 发 文 , 将 "软件 评测 师资 格 考试 纳入 计算 机 技术 与 
软件 专业 技术 资格 (水 平 ) 考 试 , 就 是 一 个 显著 的 标志 。 

我 国 的 软件 测试 研究 和 应 用 起 步 较 晚 ,在 软件 测试 理论 研究 .软件 测试 工具 及 框架 研 
发 .软件 测试 过 程 管理 .软件 质量 保证 等 方面 还 落后 于 一 些 发 达 国 家 。 尤 其 是 在 软件 测试 
工具 方面 ,国外 的 产品 几乎 占据 了 垄断 地 位 。 同 时 ,软件 测试 的 新 理论 与 新 技术 日 新 月 
异 。 这 些 对 我 国 的 软件 从 业 人 员 和 测试 从 业 人 员 都 是 严峻 的 考验 。 所 以 ,作为 软件 测试 
产业 从 业 人 员 的 后 备 力量 一 一 广大 的 高 职高 专 院 校 计算 机 专业 学 生 ( 尤 其 是 软件 专业 学 
生 ) ,理应 系统 地 学 习 软 件 测试 的 概念 .原理 ,方法 和 技术 ,为 将 来 投身 我 国 的 测试 产业 做 
好 准备 ,力争 为 我 国 测试 产业 的 发 展 做 出 应 有 的 贡献 。 

本 书 结合 高 职高 专 院 校 的 教学 特点 , 较 系统 地 对 软件 测试 进行 了 介绍 ,力求 逻辑 严 
说、 简明 易 懂 .实践 性 强 。 书 中 的 例题 .案例 和 习题 较 多 ,便于 教学 和 自学 。 本 书 还 吸纳 了 
软件 测试 中 若干 新 理论 和 新 技术 ,以 反映 软件 测试 的 最 新 进展 。 

本 书 共 分 11 章 。 第 1 章 主要 介绍 了 软件 测试 的 目标 ,软件 测试 的 认识 误区 ,软件 测 
试 的 发 展 史 、 现 状 及 发 展 趋势 ;第 2 章 介 绍 了 软件 测试 的 定义 、 对 象 及 分 类 ,V&V ,软件 测 
试 过 程 模型 和 过 程 管理 理念 ,测试 驱动 开发 的 概念 和 策略 ,软件 测试 的 原则 ,软件 测试 文 
档 ;第 3 一 4 章 介绍 了 黑 盒 和 白 盒 测试 用 例 的 设计 方法 和 策略 ;第 5 章 介绍 了 单元 测试 的 
概念 . 步 又、 环境 和 内 容 , 单 元 测试 用 例 的 设计 思路 ,用 CppUnit 进行 单元 测试 ;第 6 一 7 章 介 
绍 了 集成 测试 .确认 测试 、 系 统 测试 和 验收 测试 的 概念 和 策略 ;第 8 章 介绍 了 目前 研究 和 
应 用 的 热点 一 一 面向 对 象 软件 测试 的 概念 、 模 型 和 策略 ;第 9 章 介 绍 了 软件 测试 自动 化 的 
必要 性 和 优点 ,自动 化 测试 的 认识 误区 ,自动 化 测试 的 实施 流程 ,自动 化 测试 的 原理 和 方 
法 ,主流 测试 工具 ,IBM Rational 和 HP Mercury 公司 的 自动 化 测试 解决 方案 ,使 用 
WinRunner 进行 功能 测试 ;第 10 章 介 绍 了 软件 质量 和 质量 模型 ,软件 度量 ,CMM 及 
CMMI,PSP 及 TSP,SQA; 第 11 章 给 出 了 几 个 具体 的 测试 案例 。 书 未 附 有 常用 测试 术语 
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软件 测试 概述 


本 章 要 点 : 


。 软件 缺陷 及 其 产生 原因 。 
。 软件 测试 的 目标 。 

。 软件 测试 中 的 认识 误区 。 
软件 测试 的 发 展 史 。 

。 软件 测试 的 国内 外 现状 。 
软件 测试 的 发 展 趋势 。 


软件 是 与 计算 机 系统 操作 相关 的 程序 ,数据 和 文档 ,是 人 类 社会 高 度 发 展 的 产物 ,是 
人 类 智慧 的 结晶 。 从 20 世纪 50 年 代 初 ,软件 技术 不 断 取 得 进展 ,使 软件 在 内 涵 、 规 模 、 开 
发 方法 、 应 用 领域 等 方面 都 发 生 着 日 新 月 异 的 变化 。 软 件 越 来 越 多 地 影响 和 改变 人 类 生 
活 的 各 方面 。 然 而 ,软件 构成 及 开发 的 日 益 复 如、 软件 应 用 领域 的 日 益 拓宽 也 使 得 人 们 常 
常 受到 有 缺陷 的 软件 的 影响 ,软件 缺陷 给 人 们 带 来 了 许多 物质 上 和 精神 上 的 损失 。 软 件 
质量 不 断 受 到 人 们 的 重视 ,为 了 发 现 软件 中 的 缺陷 ,保证 软件 质量 ,软件 测试 应 运 而 生 。 
本 章 主要 介绍 软件 测试 的 目标 发 展 史 、 现 状 及 发 展 趋势 ,以 及 人 们 对 软件 测试 的 认识 误 
区 ,为 后 续 章 节 的 学 习 打下 基础 。 


1.1 软件 测试 的 意义 


1.1.1 软件 缺陷 的 典型 例子 

俗话 说 ,人 无 完 人 , 金 无 足 赤 。 人 类 智慧 的 结晶 一 一 软件 也 难以 尽善尽美 ,存在 缺陷 
的 事情 常 有 发 生 , 可 将 软件 中 的 所 有 质量 问题 都 称 为 软件 缺陷 。 软 件 缺 陷 可 小 可 大 ,然而 
软件 的 性 质 决定 了 即使 是 一 个 很 小 的 缺陷 ,也 很 有 可 能 给 使 用 者 带 来 极 大 的 损失 。 下 面 
就 是 一 些 造成 较 大 影响 的 软件 缺陷 的 例子 。 

1. 千年 虫 问 题 

20 世纪 70 年 代 , 当 时 计算 机 的 存储 空间 很 小 ,程序 员 为 了 缩减 程序 所 占 的 存储 空 
间 , 将 表示 年 份 的 4 位 数 中 的 前 两 位 去 掉 , 如 “1985” 被 表示 为 “85”。 
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这 些 程序 员 当 然 知 道 到 了 2000 年 这 种 表示 方法 会 带 来 麻烦 ,然而 ,他 们 认为 不 会 等 
到 2000 年 ,软件 系统 就 应 该 更 新 换代 了 ,所 以 并 没有 顾及 未 来 的 问题 。 

不 幸 的 是 ,这 些 程序 员 采 用 的 年 份 表达 方法 在 2000 年 快要 到 来 时 仍 被 广泛 使 用 ,这 
时 千年 虫 问题 才 引 起 世界 各 国 众多 行业 尤其 是 银行 业 、 零 售 业 、. 电 信 业 的 高 度 重视 。 为 解 
决 千年 虫 问题 ,避免 出 现 如 2001 年 与 1901 年 在 计算 机 日 期 表达 中 的 混淆 不 清 , 全 世界 已 
付出 数 千 亿 美元 的 代价 。 


2. 爱国 者 导弹 中 的 软件 缺陷 

在 第 一 次 海湾 战争 中 ,美军 最 大 的 一 次 伤亡 是 1991 年 2 月 25 日 在 沙特 阿拉 伯 的 字 
赫 兰 兵营 被 伊拉克 的 飞毛腿 导弹 击 中 . 死 28 人 , 伤 98 人 。 其 原因 是 ,大 名 鼎鼎 的 爱国 者 
导弹 的 软件 中 存在 缺陷 ,导弹 运行 100 小 时 共 形 成 343. 3 毫秒 的 积累 误差 ,导致 687 米 的 
距离 偏差 ,因此 未 能 成 功 地 拦截 飞毛腿 导弹 。 

有 意思 的 是 ,发 现 这 一 微小 偏差 的 并 不 是 爱国 者 导弹 的 设计 者 一 一 美国 人 ,而 是 思维 
严密 的 以 色 列 人 。 


3. 迪斯尼 的 圣诞 节 礼物 

1994 年 圣诞 节 前 夕 ,迪斯尼 公司 发 布 了 第 一 个 面向 儿童 的 多 媒体 光盘 游戏 一 狮子 
王 童话 ”。 这 是 迪斯尼 公司 第 一 次 进军 儿童 计算 机 游戏 市 场 ,由 于 该 公司 的 品牌 效应 以 及 
大 力 的 广告 宣传 ,狮子 王 童话 ”的 市 场 销 售 情况 非常 好 ,该 游戏 成 为 大 多 数 父母 圣诞 节 为 
孩子 必 买 的 礼物 。 

但 随后 的 情况 却 出 人 意料 。12 月 26 日 ,很 多 客户 反映 该 游戏 在 自己 的 机 器 上 无 法 
成 功 安装 或 无 法 正常 使 用 。 后 来 才 证 实 ,出现 这 种 情况 的 原因 是 迪斯尼 公司 没有 针对 “ 狮 
子 王 童话 ?可 能 使 用 的 各 种 机 型 进行 系统 兼容 性 测试 ,只 是 对 少数 机 型 进行 了 兼容 性 测 
试 ,所 以 导致 该 款 游戏 只 能 在 少数 几 种 机 器 上 成 功 安装 和 运行 。 

4. 阿 丽 亚 娜 火箭 发 射 失败 

1996 年 6 月 ,欧洲 阿 丽 亚 娜 5 型 火箭 第 一 次 发 射 ,由 于 定位 软件 出 错 ,导致 计算 机 命 
令 固 态 推进 器 与 主 发 动机 尾 哮 管 发 生 偏离 ,结果 火箭 发 射 升 空 仅 40 秒 就 爆炸 了 。 

5.“ 冲 击 波 ” 计 算 机 病毒 

2003 年 8 月 ,“ 冲 击 波 ” 计 算 机 病毒 首先 在 美国 发 作 , 导 臻 美国 政府 机 关 、 企 业 和 个 人 
成 千 上 万 台 计 算 机 受到 攻击 。 随 后 ,“ 冲 击 波 ” 蠕 虫 病毒 很 快 在 因特网 上 广泛 传播 ,中 国 、 
日 本 、 欧 洲 等 地 的 用 户 也 受到 了 攻击 ,结果 是 大 量 的 邮件 服务 器 瘫痪 ,给 整个 世界 范围 内 
的 网 络 通信 带 来 了 惨重 的 损失 。 

制造 冲击波? 病毒 的 黑客 只 用 了 3 周 时 间 就 完成 了 该 病毒 程序 。 该 病毒 仅仅 利用 微 
软 公 司 Messenger Service 中 的 一 个 缺陷 ,就 攻破 了 计算 机 安全 屏障 ,使 所 有 基于 
Windows 操作 系统 的 计算 机 崩溃 。 更 令 计 算 机 安全 专家 担忧 的 是 ,如 不 立即 采用 有 效 的 
防御 措施 ,黑客 将 很 快 找到 利用 该 缺陷 控制 大 部 分 计算 机 的 方法 。 

随后 ,微软 公司 紧急 发 布 了 升级 补丁 ,以 修复 操作 系统 中 存在 的 缺陷 ,抵御 该 病毒 的 
攻击 。 
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6. 微软 64 位 服务 器 软件 缺陷 

2004 年 上 半年 ,微软 公司 承认 ,如 果 客 户 使 用 的 是 64 位 的 Windows Server 2003 企 
业 版 ,并 且 硬 件 配置 是 英特尔 安 腾 芯 片 ,很 可 能 突然 死机 。 更 可 怕 的 情况 是 ,死机 后 根本 
不 可 能 重新 启动 ,将 给 企业 带 来 巨大 的 损失 。 

微软 公司 称 ,该 问题 是 由 硬件 管理 程序 在 检测 硬件 设备 时 造成 的 ,随后 即 推出 了 升级 
补丁 程序 。 


7. 索尼 电视 软件 缺陷 

2006 年 2 月 ,索尼 (中 国 ) 公 司 称 ,2005 年 下 半年 在 中 国内 地 推出 的 5 款 电 视 , 包 括 液 
晶 电 视 和 液晶 背 投 电视 ,由 于 在 软件 方面 出 现 了 设计 缺陷 ,导致 不 能 正常 开关 机 。 

索尼 公司 的 专业 人 员 研 究 后 发 现 ,特定 范围 内 的 液晶 背 投 电视 和 液晶 电视 的 软件 中 
存在 一 个 计时 错误 ,该 错误 会 导致 相关 型 号 电视 在 待机 及 累计 工作 约 1200 小 时 后 ,出 现 
在 使 用 中 不 能 正常 关机 或 在 待机 状态 下 不 能 开机 的 现象 。 而 液晶 电视 的 正常 工作 时 间 为 
5 万 小 时 。 随 后 索尼 (中 国 ) 有 限 公 司 对 存在 问题 的 5 款 电 视 进 行 了 免费 软件 升级 。 
1.1.2 软件 缺陷 的 产生 原因 

软件 缺陷 给 人 类 带 来 的 损失 ,是 刚才 的 几 个 例子 远 远 不 能 概括 的 。 这 种 损失 有 经 济 
上 的 、 精 神 上 的 、 身 体 上 的 ,更 有 许多 人 因为 软件 缺陷 而 付出 了 生命 的 代价 。 

软件 缺陷 产生 的 原因 到 底 是 什么 呢 ?” 软 件 产 品 是 整个 软件 开发 活动 的 成 果 结 晶 , 所 
以 我 们 应 该 到 软件 开发 活动 的 各 阶段 去 寻找 原因 。 

按照 软件 工程 的 观点 ,在 对 软件 系统 的 可 行 性 进行 论证 之 后 ,软件 开发 的 主要 阶段 依 
次 为 需求 分 析 、 软 件 设 计 、 软 件 编码 .软件 测试 ,软件 运行 和 维护 ,如 图 1-1 所 示 。 据 众多 
软件 从 业 人 员 的 亲身 项 目 实践 ,得 出 的 结论 是 ,软件 需求 分 析 不 够 全 面 、 准 确 是 导致 软件 
缺陷 的 最 主要 原因 。 


需求 分 析 上 =| 软件 设计 一 | 软件 编码 | 软件 测试 一 | 软件 运行 和 维护 


图 1-1 软件 开发 的 主要 阶段 


需求 分 析 的 主要 任务 是 确定 待 开 发 软件 的 功能 需求 ,性 能 需求 及 运行 环境 约束 。 简 
单 地 说 ,需求 分 析 是 确定 待 开发 软件 “做 什么 "。 由 于 软件 开发 最 终 是 要 交付 用 户 使 用 的 ， 
因此 所 谓 "需求 是 指 用 户 对 软件 的 需求 。 系 统 分 析 人 员 和 开发 人 员 应 在 与 用 户 反复 、 充 
分 沟通 的 基础 上 完成 需求 分 析 。 

由 于 软件 是 复杂 的 逻辑 产品 ,用 户 在 最 终 拿 到 软件 之 前 往往 很 难 一 次 性 地 精确 描述 
对 软件 的 需求 ,再 加 上 系统 分 析 人 员 、 开 发 人 员 、 用 户 对 软件 需求 的 关注 角度 和 描述 方式 
的 不 同 ,使 得 对 需求 的 全 面 、 准 确 的 理解 往往 不 能 在 需求 分 析 阶 段 一 跤 而 就 ,而 是 随 着 软 
件 开发 活动 的 进行 不 断 得 到 深化 。 需 求 分 析 阶 段 确 定 的 需求 不 全 面 、 不 准确 , 即 为 软件 缺 
陷 的 产生 埋 下 了 祸根 。 

软件 设计 和 编码 过 程 中 的 失误 也 会 导致 软件 缺陷 的 产生 ,例如 软件 设计 阶段 考虑 问 
题 的 片面 性 ,软件 设计 文档 不 够 具体 ,编码 阶段 的 错误 等 。 但 很 多 情况 下 ,不 正确 的 软件 
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设计 是 不 正确 的 需求 分 析 引 起 的 ,编码 阶段 出 现 的 错误 则 是 由 需求 分 析 和 软件 设计 不 够 
完善 ,准确 引起 的 。 
1.1.3 软件 测试 的 目标 

尽管 软件 缺陷 产生 的 原因 已 为 很 多 人 所 知 , 但 由 于 软件 本 身 以 及 软件 开发 活动 的 特 
点 ,软件 缺陷 很 难 根除 。 所 以 ,在 软件 交付 使 用 前 ,为 了 尽量 消除 软件 中 的 缺陷 ,对 其 进行 
测试 是 必 不 可 少 的 。 

软件 测试 的 目标 在 早期 被 认为 是 尽 可 能 多 地 发 现 软件 中 的 潜在 错误 ,这 一 点 也 可 以 
从 Glenford J. Myers 给 出 的 以 下 关于 软件 测试 的 规则 描述 中 看 出 。 

。 测试 是 为 了 发 现 程序 中 的 错误 而 执行 程序 的 过 程 。 

。 好 的 测试 方案 是 尽 可 能 发 现 迄 今 为 止 尚未 发 现 的 错误 的 测试 方案 。 

。 成 功 的 测试 是 发 现 了 迄今 为 止 尚未 发 现 的 错误 的 测试 。 

当前 仍然 有 部 分 人 对 软件 测试 存在 误解 ,他 们 认为 软件 测试 就 是 要 证 明 软 件 是 正确 、 
可 用 的 ,能 够 满足 用 户 的 需要 ,而 不 是 尽 可 能 多 地 暴露 软件 中 的 潜在 错误 。 

首先 ,这 种 想法 是 行 不 通 的 。 由 于 软件 是 一 种 复杂 的 逻辑 产品 ,对 软件 进行 穷 举 测试 
是 不 可 能 的 。 因 此 ,即使 到 目前 为 止 对 一 个 软件 的 测试 中 未 发 现任 何 错误 ,也 不 能 说 明 该 
软件 是 绝对 正确 的 , 正 所 谓 “ 软 件 测试 只 能 证 明 软 件 有 错 , 不 能 证 明 软 件 无 错 ”。 

从 另 一 个 角度 说 ,对 软件 测试 存 有 这 种 误解 的 人 在 进行 测试 时 ,往往 在 心理 上 会 忽略 
软件 中 可 能 存在 的 缺陷 ,而 把 注意 力 集中 在 软件 能 否 完成 基本 的 ,已 知 的 功能 上 ,这 样 的 
测试 显然 不 是 成 功 的 测试 。 

1983 年 ,在 Glenford J. Myers 观点 的 基础 上 ,Bill Hetzel 指出 ,软件 测试 的 目标 不 仅 
是 尽 可 能 多 地 发 现 软件 中 的 错误 ,还 要 对 软件 质量 进行 度量 和 评估 ,以 提高 软件 质量 。 这 
一 论断 将 对 软件 测试 的 认识 提升 到 更 高 的 层次 。 

1983 年 ,IEEE 对 软件 测试 的 定义 则 指出 ,软件 测试 的 目标 是 为 了 检验 软件 系统 是 否 
满足 用 户 的 需求 。 


1.2 软件 测试 中 的 认识 误区 


软件 测试 的 概念 处 于 不 断 的 发 展 之 中 ,再 加 上 缺乏 软件 测试 的 理论 知识 和 实践 经 验 ， 
使 得 一 些 人 对 软件 测试 的 认识 存在 误区 。 以 下 列举 对 软件 测试 的 一 些 典 型 认识 误区 。 

误区 1 测试 和 调试 是 一 回 事 。 

测试 和 调试 有 着 根本 的 不 同 。 测 试 是 一 个 有 计划 、 可 重复 的 过 程 ,目的 是 为 了 发 现 软 
件 中 的 潜在 错误 和 缺陷 ;而 调试 是 一 个 随机 的 、 不 可 重复 的 过 程 ,目的 是 寻找 错误 的 原因 
和 具体 位 置 , 并 修复 错误 。 调试 一 般 在 测试 后 进行 ,当然 ,调试 之 后 很 可 能 又 要 进行 测试 ， 
所 以 两 者 常 交 又 进行 。 

误区 2 可 以 对 软件 进行 穷 举 测试 。 

对 软件 进行 穷 举 测试 是 不 可 能 的 。 也 就 是 说 ,不 可 能 对 软件 进行 完全 的 测试 以 发 现 
软件 中 的 所 有 错误 和 缺陷 。 

这 主要 是 因为 ,由 于 需求 规格 说 明 的 复杂 性 和 程序 逻辑 的 复杂 性 ,如 下 的 测试 是 难以 


xX 
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做 到 的 。 

。 测试 程序 中 的 所 有 输入 条 件 的 取 值 。 

。 测试 程序 中 所 有 输入 条 件 取 值 的 组 合 。 

。 测试 程序 中 的 所 有 路 径 。 

。 测试 出 程序 中 所 有 潜在 的 错误 和 缺陷 ,例如 由 于 需求 分 析 不 完善 而 导致 的 错误 。 

误区 3 若 交付 使 用 的 软件 有 缺陷 ,是 测试 人 员 的 失职 。 

软件 测试 的 主要 目标 是 发 现 软件 中 更 多 的 错误 和 缺陷 ,但 不 能 通过 已 有 的 测试 证 明 
某 一 个 软件 是 绝对 正确 的 。 

交付 使 用 的 软件 有 缺陷 ,与 多 方面 的 人 员 都 有 关系 ,如 系统 分 析 人 员 、 设 计 人 员 ,编码 
人 员 ,测试 人 员 。 软 件 开发 中 的 任何 一 个 环节 出 现 问 题 ,都 有 可 能 使 软件 出 现 缺陷 。 当 
然 , 这 并 不 是 说 软件 测试 人 员 可 以 推卸 责任 ,开发 团队 中 多 方面 的 人 员 加 强 沟通 、 合 作 才 
是 最 重要 的 。 

误区 4 关注 测试 的 执行 而 忽略 测试 用 例 的 设计 。 

测试 用 例 (Test Case) 是 为 特定 目标 开发 的 一 组 测试 输入 、 执 行 条 件 和 预期 结果 ,其 
目的 是 测试 程序 中 的 某 路 径 , 或 核实 程序 或 软件 是 否 满足 某 个 特定 的 需求 。 

从 一 定 意 义 上 说 ,设计 测试 用 例 是 软件 测试 活动 中 具有 核心 地 位 的 一 个 环节 。 若 不 
注重 测试 用 例 的 设计 ,很 可 能 会 遗漏 有 价值 的 测试 用 例 ,或 导致 设计 出 的 测试 用 例 不 够 准 
确 ,从 而 不 可 能 对 软件 进行 充分 有 效 的 测试 。 

误区 5 测试 比 编程 容易 得 多 。 

从 某 种 意义 上 讲 , 对 软件 测试 人 员 的 要 求 比 编程 人 员 的 要 求 高 。 这 是 因为 ,测试 是 一 
件 十 分 复杂 的 工作 。 测 试 人 员 应 具有 细致 沉稳 的 性 格 ,很 强 的 专业 素质 ,对 被 测试 软件 的 
功能 及 架构 十 分 清楚 ;测试 人 员 还 要 能 在 无 法 实现 穷 举 测试 的 前 提 下 编写 若干 有 价值 的 
测试 用 例 ,以 尽 可 能 地 揭露 软件 中 的 错误 和 缺陷 ;在 进行 自动 化 测试 时 ,测试 人 员 还 应 有 
编写 测试 脚本 的 能 力 。 

误区 6 测试 是 编码 之 后 进行 的 工作 。 

从 软件 开发 的 瀑布 模型 ,人 们 容易 得 出 这 一 错误 的 结论 。 事实 上 ,软件 生命 周期 中 的 
测试 阶段 只 是 表明 该 阶段 的 主要 工作 是 测试 ,并 不 意味 着 测试 工作 不 能 在 需求 分 析 阶 段 、 
设计 阶段 和 编码 阶段 进行 。 

软件 测试 不 仅 是 对 程序 的 测试 ,需求 分 析 和 设计 也 应 成 为 测试 的 对 象 。 大 量 测试 实 
践 表明 ,软件 中 的 大 部 分 错误 是 在 编码 之 前 造成 的 ,需求 分 析 和 设计 造成 的 软件 错误 约 占 
所 有 错误 的 63% ,而 编码 造成 的 错误 仅 占 37%。 软 件 中 的 错误 被 发 现 得 越 晚 ,为 修复 它 
所 付出 的 代价 就 越 大 。 

所 以 在 软件 开发 过 程 中 ,应 尽早 地 ,全 面 地 开展 测试 。 软 件 测试 应 成 为 一 个 独立 的 流 
程 ,可 贯穿 到 软件 开发 的 其 他 各 流程 ,如 需求 分 析 、 设 计 、 编 码 ,并 与 之 并 发 地 执行 。 在 某 
流程 中 ,达到 恰当 的 测试 就 绪 点 即 可 进行 独立 的 测试 工作 。 测 试 还 应 是 可 迭代 的 。 只 有 
做 到 这 些 ,测试 才 可 能 是 成 功 的 。 

误区 7 测试 自动 化 是 万 能 的 。 

软件 测试 自动 化 可 以 提高 测试 的 效率 ,但 成 本 较 高 ,需要 自动 化 测试 工具 ,还 需要 测 
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试 人 员 编 写 测试 脚本 等 。 因 此 ,只 有 需要 经 常 执行 的 测试 用 例 才 适合 于 自动 化 测试 。 

当 对 某 软件 的 测试 自动 化 达到 一 定 程 度 时 ,再 想 提高 其 自动 化 程度 将 会 变 得 十 分 困 
难 , 需 要 付出 很 大 的 成 本 。2/8 原则 同样 适用 于 测试 自动 化 , 即 付 出 20% 的 成 本 可 以 实现 
80% 的 测试 自动 化 ,车 要 实现 剩余 的 20% 测 试 自动 化 ,还 需 付 出 80% 的 成 本 。 所 以 在 开 
发 一 个 软件 的 过 程 中 ,不 应 盲目 地 提高 其 测试 自动 化 的 程度 。 

误区 8 软件 测试 是 一 种 破坏 性 工作 。 

一 些 人 认为 ,以 尽 可 能 发 现 软 件 中 的 错误 为 主要 目标 的 软件 测试 是 一 种 破坏 性 工作 ， 
是 对 软件 开发 人 员工 作 的 否定 。 这 种 想法 在 很 大 程度 上 制约 了 软件 测试 的 发 展 , 且 十 分 
不 利于 软件 质量 的 保证 和 提高 。 


1.3 软件 测试 的 发 展 史 及 现状 


1.3.1 软件 测试 的 发 展 史 

软件 测试 是 伴随 着 软件 开发 活动 的 产生 而 产生 的 。 早 在 20 世纪 50 年 代 , 英 国 著名 
的 计算 机 科学 家 图 灵 就 给 出 了 软件 测试 的 原始 定义 。 图 灵 认 为 ,软件 测试 是 程序 正确 性 
证 明 的 一 种 极端 的 实验 形式 。 这 导致 人 们 对 软件 测试 的 理解 较为 狭隘 。 

当时 的 软件 测试 主要 针对 用 机 器 语言 和 汇编 语言 编写 的 程序 ,通过 设计 并 运行 测试 
用 例 , 将 运行 结果 与 测试 人 员 的 预期 结果 进行 比较 ,从 而 判断 程序 的 正确 性 。 人 们 在 设计 
测试 用 例 时 常 凭 经 验 或 直觉 ,这 使 得 测试 用 例 具 有 不 完备 性 ,测试 也 不 够 充分 和 有 效 , 通 
过 测试 之 后 的 软件 往往 还 隐藏 着 大 大 小 小 的 缺陷 。 

当时 还 有 很 多 人 认为 ,测试 就 是 “调试 ”, 是 查找 软件 中 已 发 现 错误 的 原因 并 纠正 错误 
的 一 种 活动 。 人 们 对 软件 测试 不 够 重视 ,在 测试 上 投入 的 人 力 、 物 力也 很 少 ,而 且 测试 介 
和 开发 过 程 的 时 间 点 很 晚 ,往往 是 在 软件 的 编码 结束 后 才 进 行 测试 。 

直到 1957 年 ,人 们 才 认 识 到 测试 应 该 是 一 种 发 现 软件 中 潜在 错误 和 缺陷 的 活动 。 
1972 年 ,在 北 卡罗来纳 大 学 举行 了 首届 软件 测试 正式 会 议 。1975 年 ,John Good Enough 
和 Susan Gerhart 发 表 了 名 为 (测试 数据 选择 的 原理 ) 的 文章 ,使 软件 测试 得 到 了 许多 研 
究 者 的 重视 。1979 年 , Glenford J. Myers 的 著作 《软件 测试 的 艺术 》(The Art of 
Software Testing ) 可 以 说 是 软件 测试 领域 一 本 最 重要 的 专著 。Glenford J. Myers 在 书 
中 对 软件 测试 的 定义 、 目 标 等 进行 了 描述 ,他 认为 测试 是 为 发 现 错误 而 执行 程序 的 过 程 ， 
测试 的 目的 在 于 尽 可 能 多 地 发 现 软件 中 的 错误 。 

20 世纪 80 年 代 早 期 ,软件 质量 日 益 得 到 人 们 的 重视 。1983 年 ,Bill Hetzel 在 《软件 
测试 完全 指南 》)(Complete Guide of Software Testing ) 一 书 中 指出 :“ 测 试 是 以 评价 一 个 
程序 或 系统 属性 为 目标 的 任何 一 种 活动 ,测试 是 对 软件 质量 的 度量 。” 

1983 年 ,IEEE 提出 的 软件 工程 术语 指出 :“ 测 试 是 使 用 人 工 或 自动 的 手段 来 运行 或 
测定 某 个 软件 系统 的 过 程 ,目的 在 于 检验 它 是 否 满足 规定 的 需求 或 弄 清 预期 结果 与 实际 
结果 之 间 的 差别 .” 这 个 定义 指出 了 软件 测试 的 目的 是 检验 软件 系统 是 否 满足 需求 。 

进入 20 世纪 90 年 代 , 软 件 测试 得 到 了 快速 发 展 。 随 着 面向 对 象 分 析 和 设计 技术 的 
普遍 应 用 ,面向 对 象 的 软件 测试 日 益 受 到 人 们 的 重视 ,面向 对 象 的 软件 测试 的 理论 和 技术 
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不 断 被 完善 ;各 种 软件 测试 工具 不 断 被 开发 出 来 ,使 软件 测试 的 自动 化 程度 不 断 提高 ; 越 
来 越 多 的 测试 模型 被 提出 ,测试 的 成 熟 度 问题 也 得 到 众多 专家 的 关注 ,并 提出 了 若干 测试 
成 熟 度 模型 。 

1.3.2 软件 测试 的 国内 外 现状 

在 软件 业 发 达 的 国家 ,尤其 是 美国 ,软件 测试 得 到 了 软件 从 业 人 员 的 普遍 重视 ,已 经 
形成 了 一 个 独立 的 产业 ,发 展 程度 较 高 。 主 要 体现 在 如 下 方面 : 

(1) 针对 软件 测试 的 理论 研究 在 高 校 和 科研 院 所 如 火 如 禁地 进行 ,不 断 有 软件 测试 
方面 的 学 术 会 议 召 开 ,理论 研究 成 果 层 出 不 穷 ,引导 着 测试 产业 的 发 展 方向 ;很 多 高 校 还 
单独 设置 了 软件 测试 专业 或 开设 了 测试 课程 ,大 批 学 生 投身 于 软件 测试 的 理论 学 习 和 
实践 。 

(2) 在 软件 开发 企业 尤其 是 比较 成 功 的 企业 如 微软 .IBM 等 ,软件 测试 被 放 在 十 分 重 
要 的 位 置 上 ,公司 设 有 独立 的 测试 部 门 , 配 备 专职 的 测试 人 员 。 例 如 ,在 微软 公司 ,开发 工 
程 师 与 测试 工程 师 的 比例 是 1 : 2, 而 国内 的 一 般 公 司 是 6 : 1。 在 开发 一 个 软件 的 过 程 
中 ,花费 在 测试 上 的 人 力 ,物力 和 资金 比 花费 在 编程 上 的 多 得 多 。 很 多 大 型 开发 项 目 , 测 
试 会 占据 项 目 周 期 一 半 以 上 的 时 间 。 以 IE 4.0 为 例 , 代 码 开发 时 间 为 6 个 月 ,而 稳定 程 
序 花费 了 8 个 月 的 时 间 。 这 些 都 为 公司 开发 出 高 质量 的 软件 提供 了 有 力 的 保障 。 

(3) 涌现 出 许多 著名 的 软件 测试 工具 提供 商 , 如 HP Mercury Interactive(MI) ， 
Compuware,IBM Rational,Segue,Empirix 等 。 这 些 软件 测试 工具 提供 商 的 测试 产品 占 
据 了 全 球 的 主流 测试 工具 市 场 ;同时 ,这 些 测 试 工具 提供 商 所 提供 的 测试 方案 和 框架 也 极 
大 地 促进 了 软件 测试 技术 的 发 展 。 

在 我 国 , 针 对 软件 测试 的 理论 研究 起 步 于 “六 五 期间, 在 软件 测试 的 实践 方面 则 起 步 
更 晚 。 由 于 起 步 晚 ,我 国 无 论 在 软件 测试 理论 水 平 还 是 在 测试 产业 方面 ,都 与 国际 先进 水 
平 存在 较 大 差距 。 但 随 着 我 国 软件 产业 的 高 速 发 展 及 人 们 对 软件 质量 的 日 益 重 视 , 软 件 
测试 正 处 于 空前 的 快速 发 展 时 期 ,软件 测试 在 我 国正 逐步 形成 一 个 独立 的 产业 ,主要 体现 
在 如 下 方面 : 

(1) 在 我 国 ,每 两 年 召开 一 次 的 全 国 软件 工程 会 议 , 全 国 容错 计算 会 议 都 设 有 软件 测 
试 专题 部 分 。 从 2001 年 起 召开 的 全 国 测试 学 术 会 议 , 更 是 使 软件 测试 得 到 了 软件 理论 界 
前 所 未 有 的 关注 。 

(2) 2003 年 10 月 ,国家 人 事 部 和 信息 产业 部 联合 发 文 , 决 定 将 “软件 评测 师 ? 资 格 考 
试 纳入 计算 机 技术 与 软件 专业 技术 资格 (水 平 ) 考 试 ,使 得 软件 测试 人 员 的 地 位 受到 空前 
的 重视 。 

(3) 国内 著名 的 软件 公司 大 都 认识 到 软件 测试 的 重要 性 ,并 成 立 了 专职 的 软件 测试 
队伍 。 虽然 测试 人 员 的 数目 和 所 占 比例 还 不 能 与 世界 顶尖 公司 相 比 ,但 独立 测试 的 意识 
在 各 公司 得 到 了 日 益 深 化 。 

(4)“ 以 测 代 评 ? 正 逐 步 成 为 我 国 科技 项 目 择优 支持 的 一 项 重要 举措 。 如 国家 863 计 
划 对 数据 库 管 理 系统 .操作 系统 .办 公 软 件 .ERP 等 项 目的 经 费 支持 ,都 是 通过 第 三 方 测 
试 机 构 ( 即 独立 于 软件 开发 商 和 用 户 的 一 方 ) 科 学 客观 的 测试 结果 来 决定 的 。 

(5) 各 种 软件 测试 职业 培训 机 构 如 雨后春笋 般 涌 现 ,软件 测试 还 成 为 高 校 软件 专业 
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普遍 开设 的 课程 , 越 来 越 多 的 人 投身 于 软件 测试 的 学 习 和 实践 中 。 

有 理由 相信 ,再 经 过 若干 年 的 发 展 ,我 国 测试 产业 的 发 展 水 平 会 逐步 接近 国际 先进 水 
平 , 这 也 将 促进 我 国 软件 产业 的 健康 .快速 发 展 。 

但 必须 认识 到 ,虽然 近年 来 软件 测试 在 国外 和 我 国都 取得 了 很 大 的 进展 ,但 其 发 展 速 
度 和 水 平 仍 难以 适应 高 速 发 展 的 软件 开发 技术 ,软件 测试 从 业 人 员 面临 着 巨大 的 考验 , 主 
要 体现 在 如 下 方面 : 

(1) 随 着 社会 的 发 展 ,软件 规模 日 益 扩大 ,功能 日 益 复杂 ,应 用 领域 复杂 多 样 , 都 对 软 
件 测试 提出 了 新 的 考验 。 

(2) 面向 对 象 开发 是 当前 软件 开发 的 主流 技术 ,但 面向 对 象 软件 的 测试 理论 和 技术 
还 很 不 成 熟 。 

(3) 对 分 布 式 系统 的 测试 技术 仍 处 于 发 展 阶段 。 

(4) 对 实时 系统 缺乏 有 效 的 测试 手段 。 

(5) 对 信息 系统 安全 性 的 测试 还 处 于 起 步 阶段 。 

软件 测试 之 所 以 发 展 得 相对 缓慢 ,主要 有 以 下 原因 

(1) 在 软件 测试 的 发 展 进程 ,尤其 是 软件 测试 的 发 展 早期 ,软件 开发 人 员 对 软件 测试 
存在 着 敌对 心理 。 认 为 软件 测试 一 旦 进行 ,就 会 找 出 程序 中 的 许多 错误 ,自己 的 劳动 成 果 
就 会 被 部 分 否定 ,所 以 开发 人 员 不 愿意 进行 测试 ,更 不 愿意 别人 对 自己 的 劳动 成 果 进行 测 
试 。 这 种 对 软件 测试 的 敌对 心理 ,在 很 长 一 段 时 期 内 阻碍 了 软件 测试 的 发 展 。 

(2) 软件 测试 应 贯穿 软件 开发 的 全 过 程 ,应 把 软件 测试 当 作 一 个 软件 工程 。 也 就 是 
说 ,不 能 将 软件 测试 当 作 是 单一 的 几 种 方法 或 技能 ,软件 测试 也 应 遵循 工程 化 原则 ,应 当 
有 完善 的 方法 、 过 程 和 工具 做 支撑 。 但 是 ,在 软件 概念 出 现 以 后 的 很 多 年 ,人 们 并 没有 软 
件 工程 的 概念 ,这 显然 制约 了 软件 测试 的 发 展 。20 世纪 70 年 代 以 后 ,软件 开发 才 进 入 软 
件 工程 阶段 。 软 件 工程 的 快速 发 展 进一步 加 速 了 软件 测试 的 发 展 。 

(3) 软件 测试 是 一 门 理论 与 实践 高 度 结合 的 学 科 。 没 有 系统 的 理论 做 支撑 ,软件 测 
试 就 缺乏 长 足 发 展 的 后 劲 ;而 离开 了 测试 实践 ,测试 理论 只 能 是 纸上谈兵 。 但 从 现实 情况 
来 看 ,很 少 有 人 是 既 从 事 测试 理论 研究 又 参与 大 量 测试 实践 的 ,这 使 得 软件 测试 的 发 展 面 
临 着 不 平衡 。 


1.4 软件 测试 的 发 展 趋势 


纵 观 国内 外 软件 测试 现状 ,软件 测试 的 主要 发 展 趋势 如 下 : 

(1) 软件 开发 过 程 中 的 每 个 阶段 都 是 可 测试 的 ,软件 测试 及 早 地 介入 软件 开发 的 各 
阶段 ,如 需求 分 析 阶 段 和 设计 阶段 。 

(2) 软件 测试 成 为 一 个 完全 独立 的 流程 。 测 试 可 以 贯穿 软件 开发 的 其 他 流程 ,并 与 
之 并 发 地 执行 。 在 某 流程 中 ,只 要 某 测 试 达到 准备 就 绪 点 ,就 可 以 进行 该 测试 ,而 且 测 试 
是 可 和 迭代 的 。 

(3) 面向 对 象 的 软件 测试 理论 和 技术 不 断 发 展 。 

(4) 分 布 式 系统 、 实 时 系统 的 测试 理论 和 技术 不 断 发 展 。 


第 1 章 软件 测试 概述 


(5) 软件 测试 人 员 的 地 位 得 到 极 大 的 提高 。 软 件 公司 大 都 设置 了 独立 的 软件 测试 部 
门 ,配备 有 专职 的 软件 测试 人 员 ,测试 部 门 在 公司 各 部 门 中 有 着 重要 的 地 位 。 软 件 测试 不 
再 被 看 作 是 一 种 破坏 性 工作 ,只 有 具备 很 强 软 件 开发 能 力 且 性 格 良好 的 人 才能 胜任 软件 
测试 工作 。 

(6) 第 三 方 测试 迅速 发 展 。 第 三 方 测试 机 构 是 一 个 具有 中 介 性 质 的 服务 机 构 , 它 能 
通过 自身 专业 化 的 测试 技术 和 测试 团队 为 客户 和 软件 开发 商 提 供 有 价值 的 服务 。 由 独立 
的 第 三 方 软件 测试 机 构 完成 测试 ,能 够 客观 、 公 正 地 评价 被 测试 软件 ,对 软件 开发 商 和 用 
户 来 说 都 是 有 利 的 。 


1.5 小 结 


软件 测试 是 伴随 着 软件 的 发 展 而 不 断 发 展 的 。 由 于 软件 本 身 的 特点 ,以 及 软件 开发 
活动 的 特点 ,软件 缺陷 从 来 就 难以 根除 , 它 可 能 给 使 用 者 造成 或 大 或 小 的 损失 。 

软件 测试 的 目标 是 尽 可 能 多 地 发 现 软件 中 的 错误 和 缺陷 ,对 软件 质量 进行 度量 和 评 
估 以 提高 软件 质量 ,并 检验 软件 系统 是 否 满足 用 户 需求 。 

对 软件 测试 的 看 法 中 存在 许多 误区 ,只 有 认识 这 些 误区 才能 更 好 地 理解 和 实施 软件 
测试 。 目 前 ,软件 测试 在 国内 外 均 得 到 了 快速 发 展 ,但 软件 测试 的 发 展 水 平 还 远 不 能 适应 
高 速 发 展 的 软件 开发 技术 ,很 多 方面 有 待 进一步 研究 和 发 展 。 


习 题 


.为何 软件 缺陷 难以 避免 ?9 试 谈 谈 你 的 观点 。 

. 软件 测试 的 目标 是 什么 ? 

. 测试 和 调试 有 何不 同 ? 

. 为 什么 对 软件 进行 穷 举 测试 是 不 可 能 的 ? 

. 在 一 个 软件 的 开发 过 程 中 ,测试 自动 化 的 程度 越 高 越 好 吗 ? 为 什么 ? 
. 软件 测试 的 发 展 落后 于 软件 开发 技术 的 发 展 水 平 , 主 要 原因 是 什么 ? 
. 什么 是 第 三 方 测试 ,其 有 何 优点 ? 

.你 认为 软件 测试 的 发 展 趋势 是 什么 ? 
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本 章 要 点 : 

软件 测试 的 定义 。 

软件 测试 的 对 象 。 

验证 与 确认 的 含义 和 区 别 。 
软件 测试 的 分 类 。 

软件 测试 过 程 模型 。 
测试 驱动 开发 的 思想 。 
软件 测试 的 原则 。 

软件 测试 文档 的 作用 和 分 类 。 


通过 第 1 章 的 学 习 , 我 们 对 软件 测试 有 了 一 个 大 致 的 认识 ,但 对 其 基本 概念 ,如 软件 
测试 的 定义 、 对 象 , 分 类 等 并 不 十 分 清楚 ,本 章 的 目的 在 于 介绍 关于 软件 测试 的 基本 概念 、 
原则 及 软件 测试 文档 ,以 及 目前 流行 的 测试 驱动 开发 方法 。 这 些 内 容 是 学 习 后 续 章 节 的 
基础 。 


2.1 软件 测试 概念 


2.1.1 软件 测试 的 定义 和 对 象 


1. 软件 测试 定义 

1979 年 , Glenford J. Myers 在 其 著作 《软件 测试 的 艺术 》(The Art of Software 
Testing ) 中 ,对 软件 测试 定义 为 :“ 测 试 是 为 了 发 现 错误 而 执行 的 一 个 程序 或 系统 的 过 
程 .” 这 个 定义 不 管 是 在 早期 还 是 当今 ,都 有 着 相当 大 的 影响 。 

20 世纪 80 年 代 早 期 ,软件 质量 越 来 越 多 地 得 到 人 们 的 重视 ,软件 测试 的 内 涵 正 悄悄 
发 生 着 改变 。 测 试 不 再 单纯 地 被 认为 是 一 个 发 现 错误 的 过 程 ,还 被 作为 软件 质量 保证 
(Software Quality Assurance,SQA) (软件 质量 保证 将 在 第 10 章 进 行 介绍 ) 的 主要 职能 ， 
包含 软件 质量 评价 的 内 容 。 

1983 年 ,Bill Hetzel 在 《软件 测试 完全 指南 》(Complete Guide of Software Testing ) 
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一 书 中 指出 :“ 测 试 是 以 评价 一 个 程序 或 系统 属性 为 目标 的 任何 一 种 活动 ,测试 是 对 软件 
质量 的 度量 .” 这 个 定义 是 对 Glenford J. Myers 定义 的 很 好 的 补充 ,至 今 仍 被 引用 。 

1983 年 ,IEEE 提出 的 软件 工程 术语 中 对 软件 测试 下 的 定义 是 :“ 使 用 人 工 或 自动 的 
手段 来 运行 或 测定 某 个 软件 系统 的 过 程 ,其 目的 在 于 检验 它 是 否 满足 规定 的 需求 或 弄 清 
预期 结果 与 实际 结果 之 间 的 差别 .” 这 个 定义 明确 地 指出 ,软件 测试 的 目的 是 检验 软件 系 
统 是 否 满足 需求 。 软 件 测试 不 再 被 认为 是 一 个 一 次 性 的 、 只 属于 开发 后 期 的 活动 ,而 应 与 
软件 的 整个 开发 流程 融 为 一 体 。 


2. 软件 测试 的 对 象 

早先 许多 人 认为 既然 软件 测试 是 希望 发 现 程序 中 的 错误 ,那么 测试 的 对 象 就 是 程序 。 
实际 上 ,程序 是 软件 开发 过 程 中 多 个 阶段 工作 的 产物 ,如 第 1 章 所 述 ,尽管 软件 中 的 错误 
会 在 程序 中 反映 出 来 ,但 大 部 分 错误 是 在 编码 之 前 造成 的 。 

所 以 测试 的 对 象 不 仅仅 是 程序 ,需求 分 析 和 设计 工作 也 应 列 为 测试 的 对 象 。 甚 至 从 
一 定 意义 上 说 ,它们 比 程序 更 需要 引起 测试 人 员 的 注意 。 
2.1.2 验证 与 确认 

目前 ,软件 测试 的 效果 难以 尽 如 和 人意 ,是 因为 测试 中 尚 存在 如 下 问题 

(1) 测试 工作 多 在 软件 开发 的 后 期 阶段 进行 ,没有 实现 及 早 地 ,全面 地 进行 测试 , 没 
有 一 个 规范 化 、 系 统 化 的 测试 过 程 。 

(2) 测试 设计 和 测试 操作 未 进行 分 离 。 

(3) 许多 软件 质量 保证 活动 ,如 工作 产品 评估 、 可 跟踪 性 分 析 、 接 口 分 析 、 关 键 性 分 析 
等 是 零散 的 ,不 自觉 的 行为 ,缺乏 相应 的 规划 。 

为 解决 上 述 问题 ,人 们 提出 了 V&V 概念 , 即 验 证 (Verification) 和 确认 (Validation)， 
这 是 软件 测试 领域 十 分 有 影响 的 概念 。 


1. 验证 
验证 即 检验 软件 是 否 实现 了 预先 定义 的 功能 和 其 他 特性 , 即 判断 软件 开发 每 一 阶段 
的 活动 是 否 已 成 功 地 完成 ,各 开发 阶段 形成 的 软件 配置 是 否 保持 一 致 


2. 确认 
确认 也 可 理解 为 有 效 性 确认 。 确 认 的 目的 在 于 判断 交付 使 用 的 软件 可 否 追 溯 到 用 户 
的 需求 。 确 认 的 作用 是 检验 软件 产品 功能 及 其 他 特性 的 有 效 性 。 


3. 验证 和 确认 的 关系 

从 表面 上 看 ,对 验证 和 确认 的 描述 十 分 类 似 。 它 们 的 区 别 是 什么 ”以 下 是 Boehm 对 
V&V 两 者 的 解释 。 

。 Verification: Are we building the product right( 我 们 在 正确 地 构造 软件 吗 )? 

。 Validation: Are we building the right product( 我 们 在 构造 正确 的 软件 吗 )? 

同样 都 是 “正确 ”, 但 意义 却 不 一 样 。 举 例 来 说 , 某 软 件 的 开发 过 程 完 全 按照 需求 规格 
说 明 书 和 设计 规格 说 明 书 的 预期 要 求 进行 ,每 一 开发 阶段 的 工作 都 没有 错误 , 且 各 阶段 的 
软件 配置 具有 一 致 性 ,显然 此 软件 应 该 能 通过 验证 ,但 一 定 能 通过 确认 吗 ? 不 一 定 。 因 
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为 ,也 许 该 软件 的 需求 分 析 和 设计 本 身 都 存在 缺陷 ,或 者 说 开发 人 员 ( 甚 至 也 包括 用 户 ) 原 
先 对 软件 的 功能 及 其 实现 的 理解 上 存在 缺陷 ,即使 完全 按 预期 的 要 求 开 发 软件 ,也 不 一 定 
能 满足 用 户 的 最 终 真 正 需求 。 

所 以 ,虽然 定义 中 同样 都 含有 * 正 确 ”, 但 确认 定义 中 的 “正确 ”的 级 别 更 高 , 它 要 求 开 
发 出 来 的 软件 对 用 户 是 真正 有 效 的 ,能 满足 用 户 所 有 的 最 终 需 求 ,而 这 些 需 求 中 有 些 可 能 
是 潜在 的 ,是 用 户 先前 都 没有 想到 的 。 而 验证 定义 中 的 “正确 ?只 能 说 明 软 件 开发 的 各 阶 
段 实 现 了 既定 的 要 求 , 但 这 些 既 定 的 要 求 本 身 可 能 存在 问题 。 

验证 和 确认 都 属于 测试 活动 。 可 以 这 样 认为 : 

验证 十 确认 三 测试 
验证 和 确认 是 不 同 级 别 的 测试 活动 。 


2.2 软件 测试 分 类 


下 面 从 几 个 侧面 介绍 软件 测试 的 分 类 。 


2.2.1 按 开发 阶段 分 类 

按 开发 阶段 ,软件 测试 可 以 划分 为 单元 测试 .集成 测试 .确认 测试 .系统 测试 和 验收 
测试 。 

1. 单元 测试 

单元 测试 (Unit Testing) 又 称 模块 测试 ,是 针对 软件 设计 中 的 最 小 单位 一 一 程序 模 
块 进行 正确 性 检验 的 测试 。 单 元 测试 的 目的 在 于 发 现 程序 模块 内 部 可 能 存在 的 各 种 错 
误 ,检查 各 模块 是 否 实现 了 详细 设计 说 明 中 的 模块 功能 、 性 能 ,接口 及 设计 约束 等 方面 的 
要 求 。 单 元 测试 应 从 程序 模块 的 内 部 结构 出 发 设计 测试 用 例 。 多 个 模块 可 以 并 行 地 独立 
进行 单元 测试 。 

虽然 单元 测试 是 对 某 个 模块 的 测试 ,但 在 测试 某 模块 时 ,应 考虑 它 与 外 界 的 联系 。 用 
一 些 辅助 模块 模拟 与 被 测 模块 相 联系 的 其 他 模块 ,从 而 达到 测试 被 测 模块 的 目的 。 


2， 集 成 测试 

集成 测试 (Integrated Testing) 也 称 为 组 装 测试 。 在 单元 测试 的 基础 上 ,将 所 有 程序 
模块 按照 概要 设计 的 要 求 组 装 成 一 个 系统 。 集 成 测试 的 目的 在 于 发 现 并 排除 在 模块 连接 
过 程 中 可 能 出 现 的 问题 ,最终 构 成 符合 概要 设计 要 求 的 软件 系统 。 


3. 确认 测试 
确认 测试 (Validation Testing) 又 称 为 有 效 性 测试 。 确 认 测 试 的 目的 是 检查 已 实现 的 
软件 系统 是 否 满足 需求 规格 说 明 书 中 规定 的 各 种 需求 ,以 及 软件 配置 是 否 完全 、 正 确 。 


4. 系统 测试 

最 终 得 到 的 软件 不 是 一 个 孤立 的 对 象 ,往往 是 作为 整个 目标 系统 的 一 个 组 成 元 素 而 
存在 的 。 

系统 测试 (System Testing) 将 通过 确认 测试 的 软件 作为 整个 基于 计算 机 系统 的 一 个 
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元 素 ,在 实际 运行 环境 下 或 模拟 系统 运行 环境 下 ,测试 其 与 系统 中 其 他 元 素 ( 硬 件 、 外 设 、 
网 络 .系统 软件 ,支持 平台 等 ) 能 否 正确 地 配置 .连接 ,并 满足 用 户 需求 。 
系统 测试 的 目的 是 通过 与 系统 的 需求 定义 比较 ,发现 软件 与 系统 定义 不 符合 的 地 方 。 


5. 验收 测试 

验收 测试 (Acceptance Testing) 即 按 项 目 任务 书 或 合同 、 供 需 双 方 约 定 的 验收 依据 文 
档 对 整个 系统 进行 测试 与 评审 ,以 决定 是 否 接收 软件 系统 。 

验收 测试 是 以 用 户 为 主 的 测试 ,但 软件 开发 人 员 和 SQA( 即 SQA 人 员 ) 也 应 参加 。 
2.2.2 按 测试 实施 组 织 分 类 

按照 实施 测试 的 组 织 ,可 将 测试 分 为 测试 .8 测试 和 第 三 方 测试 。 


1. @ 测试 

a 测试 (Alpha Testing) 属 于 开发 方 进行 的 测试 , 指 软 件 开发 方 组 织 公 司 内 部 人 员 模 
拟 各 类 用 户 对 即将 交付 的 软件 产品 ( 称 为 a 版本) 进行 测试 ,以 发 现 其 中 的 错误 并 改正 。 
a 测试 的 关键 在 于 尽 可 能 逼真 地 模拟 软件 的 实际 运行 环境 ,并 尽 最 大 努力 涵盖 所 有 可 能 
的 用 户 操作 方式 。 

a 测试 的 目的 是 评价 软件 产品 的 FLURPS (Function, Localization, Usability， 
Reliability, Performance,Support) , 即 功能 、 局 域 化 、 可 使 用 性 、 可 靠 性 ,性 能 和 支持 ,尤其 
注重 产品 的 界面 和 特色 。 经 过 a 测试 调整 的 软件 产品 称 为 B 版 本 。 


2.B 了 测试 

8 测试 (Beta Testing) 是 用 户 进 行 的 测试 ,但 通常 不 等 同 于 验收 测试 , 即 决 定 是 否 接 
收 软件 并 不 是 B 测试 的 目的 。8B 测试 的 目的 在 于 帮助 开发 方 在 正式 发 布 软件 产品 前 对 其 
进行 最 后 的 改进 。 

B 测 试 一 般 在 a 测试 之 后 进行 ,是 由 大 量 用 户 在 实际 操作 环境 下 对 软件 的 B 版 本 进 
行 的 测试 。 这 些 用 户 是 与 公司 签订 了 支持 软件 产品 预 发 行 合 同 的 外 部 客户 ,他 们 被 要 求 
以 尽 可 能 多 的 方式 使 用 该 软件 ,并 将 使 用 过 程 中 出 现 的 错误 信息 (真实 的 以 及 主观 认定 
的 ) 返 回 给 开发 方 。 开 发 方 根据 用 户 的 错误 报告 ,在 正式 发 布 软件 产品 之 前 对 之 进行 一 系 
列 改 进 。 

B 测 试 主要 在 于 衡量 产品 的 FLURPS ,着 重 于 产品 的 支持 性 ,包括 文档 客户 培训 和 
支持 产品 生产 能 力 。 

3. 第 三 方 测试 

第 三 方 测试 是 指 由 不 同 于 开发 方 和 用 户 方 的 组 织 进行 的 测试 。 通 常 模拟 用 户 的 真实 
操作 环境 ,对 软件 进行 确认 测试 。 第 三 方 测试 有 利于 客观 .公正 地 测试 和 评价 软件 。 
2.2.3 按 测试 策略 分 类 

根据 测试 实施 策略 的 不 同 ,软件 测试 可 分 为 白 盒 测 试 . 黑 盒 测 试 和 灰 盒 测试 。 

1. 和 白 盒 测试 

白 盒 测 试 (White-box Testing) 又 称 为 结构 测试 或 逻辑 驱动 测试 。 顾 名 思 义 “ 白 盒 ” 
可 理解 为 程序 装 在 一 个 透明 的 盒子 里 ,所 以 盒子 内 的 程序 对 测试 人 员 是 可 见 的 。 
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执行 白 盒 测试 的 人 员 清 楚 地 了 解 程序 内 部 逻辑 结构 和 处 理 过 程 ,检查 程序 内 部 结构 
和 路 径 是 否 达到 了 预期 的 设计 要 求 。 白 盒 测 试 方法 将 在 第 4 章 具 体 介 绍 。 


2. 黑 盒 测试 

黑 盒 测试 (Black-box Testing) 又 称 为 功能 测试 或 数据 驱动 测试 。 顾 名 思 义 “ 黑 盒 ” 
可 理解 为 程序 装 在 一 个 漆黑 的 盒子 里 ,所 以 盒子 内 的 程序 对 测试 人 员 是 不 可 见 的 。 

执行 黑 盒 测试 的 人 员 在 已 知 软件 应 具有 的 功能 的 基础 上 ,完全 不 考虑 程序 的 内 部 逻 
辑 结构 和 处 理 过 程 , 在 程序 接口 处 进行 测试 ,检查 在 需求 规格 说 明 书 中 规定 的 预期 功能 是 
和 否 能 正常 实现 。 黑 盒 测 试 方法 将 在 第 3 章 具 体 介绍 。 


3. 灰 盒 测试 

灰 盒 测试 (Gray-box Testing) 是 一 种 介 于 白 盒 测试 和 黑 盒 测试 之 间 的 测试 ( 故 很 多 
资料 未 对 其 单独 介绍 )。 它 基于 程序 运行 的 外 部 表现 同时 又 结合 程序 内 部 逻辑 结构 来 设 
计 测 试用 例 , 执 行程 序 并 采集 程序 路 径 执 行 信息 和 外 部 用 户 接口 结果 。 一 般 认为 ,集成 测 
试 阶段 采用 的 测试 策略 近似 于 灰 盒 测试 。 
2.2.4 按 测试 执行 方式 分 类 

根据 软件 测试 的 执行 方式 ,可 将 软件 测试 分 为 静态 测试 (Static Testing) 和 动态 测试 
(Dynamic Testing) 两 种 。 

静态 测试 不 实际 执行 程序 ,而 是 利用 人 工 手段 及 静态 测试 工具 完成 对 程序 的 静态 测 
试 。 静 态 测试 的 主要 目的 是 检查 软件 的 表示 与 描述 是 否 一 致 ,没有 冲突 和 歧义 。 静 态 测 
试 将 在 第 4 章 进 行 介 绍 。 

动态 测试 则 实际 运行 测试 用 例 , 以 发 现 软件 中 的 错误 。 

依据 黑 盒 方法 设计 的 测试 是 动态 测试 , 白 盒 方法 设计 的 测试 则 包括 静态 测试 和 动态 
测试 两 种 类 型 , 故 对 动态 测试 的 介绍 将 贯穿 于 第 3 章 和 第 4 章 。 
2.2.5 其 他 测试 方法 和 技术 

在 实际 应 用 中 ,还 有 许多 具体 的 测试 类 型 ,它们 往往 是 为 实现 某 特定 目标 而 进行 的 测 
试 。 例 如 回归 测试 .迭代 测试 .功能 测试 ,性 能 测试 .安全 性 测试 .可 靠 性 测试 .兼容 性 测 
试 . 可 移植 性 测试 . 冒 烟 测 试用 户 界面 测试 ,随机 测试 .引导 测试 .本 地 化 测试 等 。 


1. 回归 测试 

回归 测试 (Regression Testing) 是 为 了 验证 对 软件 引入 的 修改 的 正确 性 及 其 影响 而 
进行 的 测试 。 

在 软件 开发 的 任何 一 个 阶段 ,只 要 软件 发 生 了 改变 ,就 有 可 能 引起 一 系列 问题 。 软 件 
的 改变 可 能 是 因为 发 现 了 软件 中 的 错误 并 做 出 了 修改 ,也 有 可 能 是 因为 在 集成 或 维护 阶 
段 加 入 了 新 的 功能 模块 。 

当 软 件 中 的 错误 被 发 现 ,往往 需要 修改 的 地 方 会 有 多 处 ,包括 表面 的 和 深层 次 的 。 为 
了 不 遗漏 任何 需要 修改 之 处 ,也 为 了 避免 修改 对 软件 中 未 被 修改 之 处 造成 的 副作用 ,应 进 
行 回 归 测 试 ;加 入 新 的 功能 模块 到 软件 中 后 ,为 使 新 功能 能 正常 实现 且 不 会 对 其 他 模块 造 
成 副作用 ,也 应 进行 回归 测试 。 
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回归 测试 的 工作 量 在 整个 软件 测试 过 程 中 占有 很 大 的 比重 ,软件 开发 的 各 个 阶段 都 
会 进行 多 次 回归 测试 。 
关于 回归 测试 将 在 第 7 章 详 细 介绍 。 


2. 和 迭代 测试 

和 迭代 测试 是 从 迁 代 的 开发 模式 中 延伸 出 来 的 。 在 和 迭代 开发 模式 中 ,系统 的 开发 是 通 
过 多 次 迭代 完成 的 。 每 次 迭代 都 包含 需求 分 析 、 设 计 、 编 码 、 集 成 .测试 等 活动 。 每 次 迭代 
完成 后 ,会 出 现 新 的 迭代 周期 。 通 过 一 次 次 地 和 迭代 ,系统 增 量 式 地 集成 若干 新 功能 ,直至 
最 终 实现 系统 应 具备 的 全 部 功能 。 

在 每 个 迭代 周期 中 ,测试 工作 由 两 方面 组 成 : 

(1) 对 当前 迭代 周期 产品 的 增 量 测试 。 

(2) 对 原先 迭代 周期 已 完成 功能 的 回归 测试 。 

和 迭代 开发 模式 继承 了 瀑布 开发 模式 的 优点 : 全 面 、 计 划 性 强 和 易于 管理 。 更 为 重要 
的 是 ,迭代 开发 模式 将 测试 工作 分 布 到 每 个 迭代 周期 中 ,使 测试 工作 提前 进行 ,以 尽早 地 
发 现 软件 中 的 缺陷 ,从 而 降低 软件 开发 的 风险 和 成 本 。 


3. 功能 测试 

功能 测试 (Functional Testing) 也 称 为 行为 测试 [Behavioral Testing) , 它 根据 产品 特 
征 、 操 作 描 述 和 用 户 方案 ,测试 一 个 产品 的 特性 和 可 操作 行为 以 确定 它们 是 否 满足 设计 需 
求 。 一 般 把 黑 盒 测试 称 为 功能 测试 ,当然 这 不 是 绝对 的 。 功 能 测试 有 时 也 会 用 到 白 盒 测 
试 的 方法 ,而 黑 盒 测试 有 时 可 能 是 在 对 性 能 进行 测试 。 


4. 性 能 测试 

性 能 测试 (Performance Testing) 是 评价 一 个 产品 或 组 件 与 性 能 需求 是 否 符合 的 测 
试 ,包括 负载 (压力 ) 测 试 、 强 度 测试 、 容 量 测试 ,疲劳 测试 等 类 型 。 

性 能 测试 是 软件 测试 中 的 一 个 重点 。 对 性 能 测试 将 在 第 7 章 进 行 具体 介绍 。 


5. 安全 性 测试 

安全 性 测试 (Security Testing) 的 目的 在 于 检测 软件 系统 对 非法 侵入 的 防范 能 力 。 
理论 上 讲 , 只 要 拥有 足够 多 的 时 间 和 资源 ,任何 系统 都 是 可 以 侵入 的 ,所 以 通过 安全 性 测 
试 及 采取 相应 的 措施 后 ,应 使 非法 侵入 软件 系统 的 代价 大 于 被 保护 信息 的 价值 ,使 非法 侵 
人 者 得 不 偿 失 。 

6. 可 靠 性 测试 

可 靠 性 测试 (Reliability Testing) 的 目的 是 测算 在 一 定 的 环境 下 ,系统 能 正常 工作 的 
概率 。 通 常 , 用 平均 无 故障 时 间 (Mean Time Between Failures,MTBF) 即 两 次 失效 之 间 
的 平均 操作 时 间 来 衡量 系统 的 可 靠 性 。 


7. 兼容 性 测试 (配置 测试 ) 

兼容 性 测试 (Compatibility Testing) 有 时 也 被 称 为 配置 测试 (Configuration 
Testing) ,但 两 者 含义 略 有 不 同 。 一 般 说 来 ,配置 测试 是 为 了 保证 软件 在 其 相关 的 硬件 上 
能 够 正常 运行 ,而 兼容 性 测试 则 主要 是 测试 软件 能 否 与 其 他 不 同 的 软件 协作 运行 。 
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8. 可 移植 性 测试 
可 移植 性 测试 (Portability Testing) 的 目的 在 于 验证 软件 能 否 被 移植 到 指定 的 硬件 
或 软件 平台 上 。 

9. 冒 烟 测 试 

冒 烟 测 试 (Smoke Testing) 的 对 象 是 每 一 个 新 编译 的 需要 正式 测试 的 软件 版 本 ,目的 
是 确认 软件 基本 功能 正常 ,可 以 进行 后 续 的 正式 测试 工作 。 骨 烟 测试 的 执行 者 是 版 本 编 
译 人 员 。 

冒 烟 测 试 不 能 由 测试 小 组 独立 建立 , 它 应 该 是 通过 联合 的 方式 ,至 少 是 在 与 开发 人 员 
达成 一 致 的 情况 下 建立 的 。 冒 烟 测 试 的 目标 是 显示 其 稳定 性 ,而 不 是 发 现 错误 。 必 须 在 
系统 测试 环境 中 进行 冒 烟 测 试 。 

冒 烟 测 试 的 名 称 可 以 理解 为 该 种 测试 耗 时 短 , 仅 用 一 袋 烟 的 功夫 足够 了 。 也 有 人 认 
为 是 将 其 形象 地 类 比 于 新 电路 板 的 基本 功能 检查 (任何 新 电路 板 焊 好 后 ,应 先 通电 检查 ， 
如 果 存 在 设计 缺陷 ,电路 板 可 能 会 短路 , 即 出 现 冒 烟 的 现象 ) 。 


10. 用 户 界面 测试 
用 户 界 面 测 试 (User Interface Testing) 的 目的 在 于 测试 用 户 界面 的 风格 是 否 满足 客 
户 要 求 ,包括 用 户 友 好 性 、 人 性 化 、 易 操作 性 等 测试 。 


11. 随机 测试 

随机 测试 (Ad Hoc Testing) 是 没有 书面 测试 用 例 的 测试 ,主要 是 依据 测试 人 员 的 经 
验 对 软件 进行 功能 和 性 能 抽查 。 

随机 测试 是 根据 测试 文档 执行 用 例 测试 的 重要 补充 手段 ,是 保证 测试 覆 六 完整 性 的 
有 效 方 式 。 


12. 引导 测试 

引导 测试 (Pilot Testing) 是 指 在 软件 开发 中 验证 系统 在 真实 硬件 和 客户 基础 上 处 理 
典型 操作 的 能 力 。 在 软件 外 包 测 试 中 ,引导 测试 通常 是 客户 检查 软件 测试 公司 测试 能 力 
的 一 种 形式 ,只 有 通过 了 客户 特定 的 引导 测试 ,软件 测试 公司 才能 接受 客户 真实 软件 项 目 
的 软件 测试 。 


13. 本 地 化 测试 

本 地 化 测试 (Localization Testing) 的 对 象 是 软件 的 本 地 化 版 本 ,测试 目的 在 于 测试 
特定 目标 区 域 设置 的 软件 本 地 化 质量 。 从 测试 方法 上 可 以 分 为 基本 功能 测试 .安装 / 印 载 
测试 .当地 区 域 的 软 硬 件 兼 容 性 测试 等 。 本 地 化 测试 的 内 容 主要 是 软件 本 地 化 后 的 界面 
布局 和 软件 翻译 的 语言 质量 ,包含 软件 .文档 和 联机 帮助 等 部 分 。 


2.3 软件 测试 过 程 


随 着 测试 技术 的 不 断 发 展 , 人 们 更 加 关注 测试 的 过 程 , 对 测试 过 程 的 管理 已 成 为 成 功 
实施 测试 的 重要 保证 。 
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软件 测试 过 程 用 于 定义 软件 测试 的 流程 和 方法 。 众 所 周知 ,开发 过 程 的 质量 决定 了 
软件 的 质量 ,同样 地 ,测试 过 程 的 质量 将 直接 影响 测试 实施 的 效果 。 软 件 测试 过 程 和 软件 
开发 过 程 一 样 ,都 应 遵循 软件 工程 的 原理 。 

2.3.1 软件 测试 过 程 模型 

随 着 测试 过 程 管理 的 发 展 ,测试 人 员 通 过 大 量 的 实践 总 结 出 了 很 多 很 好 的 测试 过 程 
模型 ,如 V 模型 、W 模型 .H 模型 等 。 这 些 模型 将 测试 活动 进行 了 抽象 ,并 与 开发 活动 进 
行 了 有 机 的 结合 ,是 测试 过 程 管理 的 重要 参考 依据 。 

1. V 模型 

V 模型 最 早 是 由 Paul Rook 在 20 世纪 80 年 代 后 期 提出 的 , 旨 在 改进 软件 开发 的 效 
率 和 效果 。V 模型 反映 出 了 测试 活动 与 分 析 设计 活动 的 关系 ,如 图 2-1 所 示 。 图 中 ,从 左 
到 右 描述 了 基本 的 开发 过 程 和 测试 行为 ,非常 明确 地 标注 了 测试 过 程 中 存在 的 不 同类 型 
的 测试 ,并 且 清 楚 地 描述 了 这 些 测试 阶段 和 开发 过 程 中 各 阶段 的 对 应 关系 。 
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图 2-1 软件 测试 V 模型 


V 模型 指出 ,单元 和 集成 测试 应 检测 程序 的 执行 是 否 满足 软件 设计 的 要 求 ;系统 测 
试 应 检测 系统 功能 、 性 能 的 质量 特性 是 否 达到 系统 要 求 的 指标 ;确认 测试 和 验收 测试 追溯 
软件 需求 规格 说 明 书 进行 测试 ,确定 软件 的 实现 是 否 满足 用 户 需 要 或 合同 的 要 求 。 

V 模型 也 存在 一 定 的 局 限 性 。 它 仅仅 把 测试 作为 在 编码 之 后 的 一 个 阶段 ,主要 是 针 
对 程序 进行 的 寻找 错误 的 活动 ,对 软件 设计 、 需 求 分 析 等 活动 的 测试 要 到 后 期 才能 完成 。 
这 样 的 测试 顺序 会 使 修复 错误 的 代价 大 大 增加 ,不 利于 提高 软件 开发 和 测试 的 效率 。 

2. W 模型 

V 模型 未 能 体现 出 “尽早 地 全面 地 进行 软件 测试 的 原则 ,为 了 弥补 V 模型 的 不 足 ， 
W 模型 出 现 了 。 

WW 模型 是 由 Evolutif 公司 提出 的 。 相 对 于 V 模型 .W 模型 增加 了 软件 各 开发 阶段 
中 应 同步 进行 的 验证 和 确认 活动 。 如 图 2-2 所 示 ,W 模型 由 两 个 V 字 型 模型 组 成 ,分 别 
表示 测试 和 开发 过 程 。 从 图 2-2 可 以 明显 看 出 测试 与 开发 的 并 行 关系 ,也 就 是 说 ,测试 与 
开发 是 紧密 结合 的 


有 软件 测试 
用 户 需求 V&V 


用 户 需求 (验收 测试 设计 ) / 
需求 分 析 需求 分 析 与 系统 设计 V&V 交付 验收 测试 
与 系统 设计 (确认 与 系统 测试 设计 ) 7 
i 概要 设计 V&V 实 系统 测 
概要 设计 (集成 测试 设计 ) 
二 集成 测试 
本 详细 设计 V&V 
详细 设计 | | 
单元 测试 
编码 


图 2-2 软件 测试 W 模型 


W 模型 强调 ,测试 伴随 着 软件 开发 的 各 阶段 ,测试 的 对 象 不 仅仅 是 程序 ,需求 分 析 、 
设计 等 同样 需要 测试 。 也 就 是 说 ,测试 与 开发 是 同步 进行 的 , 当 某 一 阶段 的 工作 完成 后 ， 
就 可 以 进行 测试 。 

W 模型 有 利于 尽早 地 .全面 地 进行 测试 ,以 发 现 软 件 中 存在 的 问题 。 例 如 ,需求 分 析 
完成 后 ,测试 人 员 就 应 该 参与 到 对 需求 的 验证 和 确认 活动 中 ,以 尽早 地 发 现 需求 分 析 中 存 
在 的 问题 ,并 从 可 测试 性 角度 为 需求 文档 的 编写 提出 建议 。 同 时 ,测试 人 员 结 合 前 期 对 项 
目的 把 握 , 有 利于 及 时 了 解 项 目的 难度 和 测试 中 存在 的 风险 ,易于 制定 出 完善 的 测试 计划 
和 方案 ,安排 开发 中 各 阶段 的 测试 方法 .进度 和 人 员 ,使 软件 的 开发 过 程 进 展 顺利 ,提高 软 
件 测试 和 开发 的 效率 。 

W 模型 也 有 利于 全 过 程 地 测试 。 这 是 因为 W 模型 中 将 测试 与 开发 活动 紧密 结合 起 
来 ,使 测试 人 员 充 分 关注 开发 过 程 ,对 开发 过 程 的 各 种 变更 及 时 响应 。 例 如 ,根据 开发 进 
度 计划 的 变更 及 时 调整 测试 进度 和 测试 策略 ,以 及 依据 需求 的 变更 及 时 调整 测试 用 例 等 。 

W 模型 也 存在 局 限 性 。 在 W 模型 中 ,需求 分 析 、 设 计 , 编 码 等 活动 被 视 为 串 行 的 , 同 
时 ,测试 和 开发 活动 之 间 也 是 一 种 线性 的 关系 , 某 开发 活动 完全 结束 后 才 可 以 正式 开始 进 
行 测试 ,这 样 就 无 法 支持 迭代 、 自 发 性 及 变更 调整 。 对 于 当前 软件 开发 复杂 多 变 的 情况 ， 
W 模型 并 不 能 完全 解决 测试 管理 中 面临 的 困惑 。 

3. H 模型 

V 模型 和 W 模型 都 存在 不 足 之 处 ,它们 都 把 软件 的 开发 过 程 中 的 需求 分 析 ,设计 、 编 
码 等 活动 视 为 串 行 的 。 而 大 量 的 实践 表明 ,各 阶段 保持 严格 的 串 行 关系 只 是 一 种 理想 的 
状况 ,需求 的 变更 等 都 会 破坏 这 一 理想 状况 , 故 与 各 开发 阶段 相对 应 的 测试 之 间 也 不 可 能 
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保持 严格 的 次 序 关 系 。 同 时 ,各 层次 的 测试 (单元 测试 、 集 成 测试 系统 测试 等 ) 也 存在 反 
复 触 发 .迭代 和 增 量 关系 。 

为 了 解决 以 上 问题 ,测试 专家 提出 了 H 模型 。 它 将 测试 活动 完全 独立 出 来 ,形成 一 
个 完全 独立 的 流程 ,以 将 测试 准备 活动 和 测试 执 人 
行 活动 清晰 地 体现 出 来 ,如 图 2-3 所 示 。 测试 准备 测试 执行 。 测试 流程 

图 2-3 绘 出 的 仅 为 整个 软件 生产 周期 中 某 个 中 
层次 上 的 一 次 测试 。 图 中 标注 的 其 他 流程 可 以 一 一 一 一 -一 - 

是 任意 的 开发 流程 ,例如 设计 流程 或 编码 流程 ， 图 2-3 软件 测试 H 模型 
也 可 以 是 非 开发 流程 ,如 SQA 流程 ,甚至 是 测试 
流程 自身 。 只 要 测试 准备 活动 完成 ,达到 了 测试 就 绪 点 , 即 可 执行 测试 工作 。 

例如 ,在 一 个 构件 化 ERP 项 目的 系统 测试 过 程 中 ,由 于 前 期 需求 难以 确定 ,开发 周期 
相对 较 长 ,为 了 进行 更 好 的 跟踪 和 管理 ,项 目 采用 增 量 和 和 迭代 模型 进行 开发 。 整 个 项 目 开 
发 共 分 三 个 阶段 : 第 一 阶段 实现 进 销 存 的 简单 的 功能 和 工作 流 ; 第 二 阶段 实现 固定 资产 
管理 ,财务 管理 ,并 完善 第 一 阶段 的 进 销 存 功 能 ;第 三 阶段 增加 办 公 自动 化 的 管理 。 该 项 
目 每 一 阶段 的 工作 是 对 上 一 阶段 成 果 的 一 次 迭代 完善 ,同时 肢 加 了 新 功能 。 

在 该 项 目的 系统 测试 过 程 中 ,根据 H 模型 的 思想 ,把 系统 测试 作为 一 个 独立 的 流程 ， 
达到 相应 的 测试 就 绪 点 时 即 可 执行 测试 。 该 系统 的 三 个 阶段 相对 独立 ,每 一 阶段 完成 的 
阶段 产品 亦 具有 相对 独立 性 ,可 以 作为 系统 测试 的 测试 就 绪 点 。 故 在 该 系统 开发 过 程 中 ， 
可 开展 三 个 阶段 的 系统 测试 ,每 个 阶段 系统 测试 具有 不 同 的 侧重 点 ,以 实现 与 各 阶段 开发 
的 紧密 结合 ,尽早 发 现 软件 中 的 错误 ,降低 错误 修复 的 成 本 。 软 件 开发 与 系统 测试 过 程 的 
关系 如 图 2-4 所 示 。 
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图 2-4 软件 开发 与 系统 测试 的 关系 


H 模型 使 我 们 对 软件 测试 有 了 更 进一步 的 认识 : 软件 测试 不 仅 指 测试 的 执行 ,还 包 
括 很 多 其 他 活动 ,如 测试 的 准备 ;软件 测试 是 一 个 独立 的 流程 ,可 贯穿 到 软件 产品 整个 生 
命 周 期 中 的 任 一 流程 ,与 之 并 发 地 进行 ;只 要 某 个 测试 达到 准备 就 绪 点 ,测试 执行 活动 就 
可 以 开展 ;不 同 的 测试 活动 可 以 是 按照 某 个 次 序 先后 进行 的 ,但 也 可 能 是 反复 的 。 

4. 其 他 模型 

除 上 述 几 种 常见 模型 外 ,业界 还 流传 着 其 他 模型 ,例如 X 模型 .前 置 测试 模型 等 。 

入 模型 提出 针对 单独 的 程序 片段 进行 相互 分 离 的 编码 和 测试 ,再 通过 频繁 的 交接 , 通 
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过 集成 最 终 合成 为 可 执行 的 程序 。 

前 置 测 试 模型 体现 了 开发 与 测试 的 紧密 结合 ,要 求 对 每 一 个 交付 内 容 进行 测试 。 使 
用 该 模型 可 以 加 快 项 目 进度 。 
2.3.2 测试 过 程 的 实施 策略 


1. 测试 过 程 模型 选取 策略 

以 上 介绍 的 测试 过 程 模型 为 人 们 提供 了 软件 测试 的 流程 和 方法 ,为 测试 过 程 管理 提 
供 了 重要 依据 ,对 指导 开展 测试 工作 具有 极 重 要 的 意义 。 但 任何 测试 模型 都 不 是 万 能 的 ， 
不 可 能 有 哪 种 模型 完全 适用 于 某 项 测试 工作 。 应 针对 具体 的 开发 项 目 灵活 地 选择 测试 过 
程 模型 , 尽 可 能 地 利用 各 模型 中 对 项 目 有 实用 价值 的 方面 ,不 能 为 使 用 模型 而 使 用 模型 。 

一 般 说 来 ,在 实际 的 测试 活动 中 ,可 以 W 模型 为 框架 ,及 早 全 面 地 开展 测试 ,同时 灵 
活 地 运用 了 H 模型 的 独立 测试 思想 ,将 测试 与 开发 过 程 紧 密 结合 ,在 达到 恰当 的 测试 就 绪 
点 时 执行 独立 的 测试 工作 ,测试 工作 应 是 可 迭代 的 。 

2. 测试 过 程 管理 理念 

测试 过 程 管理 理念 是 从 无 数 的 测试 实践 中 提炼 出 来 的 ,能 指导 测试 人 员 成 功 地 策划 
和 开展 测试 过 程 ,对 于 测试 人 员 是 不 可 或 缺 的 精神 财富 。 测 试 过 程 管理 牵涉 的 范围 非常 
广泛 ,包括 过 程 定义 、 人 力 资源 管理 .风险 管理 等 ,以 下 仅 介绍 从 测试 过 程 模型 中 提炼 出 来 
的 、 对 实际 测试 有 指导 意义 的 测试 过 程 管理 理念 。 

(1) 尽早 测试 

“尽早 测试 ?是 从 W 模型 中 抽象 出 来 的 理念 。 测 试 不 应 是 在 编码 之 后 才 开 展 的 工作 ， 
测试 与 开发 是 两 个 相互 依存 的 、 并 行 的 过 程 ,在 开发 过 程 中 的 早期 一 一 需求 分 析 阶 段 就 应 
开展 测试 工作 。 

“尽早 测试 ”主要 包含 两 方面 的 含义 ,第 一 ,测试 人 员 早 期 参与 到 软件 项 目 中 ,及 时 开 
展 测试 的 准备 工作 ,包括 编写 测试 计划 ,制定 测试 方案 以 及 准备 测试 用 例 。 第 二 ,尽早 开 
展 测试 执行 工作 ,一 旦 代码 模块 完成 ,就 应 该 及 时 开展 单元 测试 ;一 旦 代码 模块 被 集成 为 
相对 独立 的 子 系统 , 便 可 以 开展 集成 测试 ;一 旦 有 产品 提交 , 便 可 以 开展 系统 测试 工作 。 

尽早 开展 测试 准备 工作 ,使 测试 人 员 能 够 在 早期 了 解 测试 的 难度 ,预测 测试 的 风险 ， 
有 利于 制定 出 完善 的 测试 计划 和 方案 ,提高 软件 测试 及 开发 的 效率 ,规避 测试 中 存在 的 风 
险 。 尽 早 开展 测试 执行 工作 ,有 利于 测试 人 员 尽早 地 发 现 软件 中 的 缺陷 ,大 大 降低 了 错误 
修复 的 成 本 。 

需要 注意 的 是 “尽早 测试 ?并 不 是 盲目 地 提前 测试 活动 ,测试 活动 开展 的 前 提 是 达到 
相应 的 测试 就 绪 点 。 

(2) 全 面 测试 

软件 是 程序 数据 和 文档 的 集合 ,因而 软件 测试 不 仅仅 是 对 程序 的 测试 ,还 应 包括 对 
软件 副产品 的 全 面 测试 ,这 是 W 模型 中 一 个 重要 的 理念 。 需 求 分 析 文 档 、 设 计 文 档 作为 
软件 的 阶段 性 产品 ,直接 影响 到 软件 的 质量 。 大 量 实践 表明 ,软件 中 的 大 部 分 错误 不 是 在 
编码 阶段 而 是 在 编码 之 前 的 需求 分 析 和 设计 中 造成 的 。 

“全 面 测试 "主要 包含 下 面 两 方面 的 含义 : 
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Q@ 对 软件 的 所 有 阶段 性 产品 进行 全 面 测试 ,包括 需求 分 析 文档 .设计 文档 、 程 序 代 
码 、 用 户 文档 等 。 

@ 软件 开发 人 员 和 测试 人 员 ( 有 时 还 包括 用 户 ) 均 应 参与 到 测试 工作 中 ,例如 对 需求 
的 验证 和 确认 活动 ,就 需要 开发 人 员 ,测试 人 员 及 用 户 的 共同 参与 ,这 样 才能 保证 软件 最 
大 限度 地 满足 用 户 的 需求 。 

“全 面 测试 有 助 于 从 多 方面 保证 软件 产品 的 质量 。 

(3) 全 过 程 测试 

W 模型 中 体现 的 另 一 个 测试 理念 就 是 “全 过 程 测试 ”。W 模型 的 双 V 字形 象 地 表明 
了 软件 开发 与 软件 测试 的 紧密 结合 。 

“全 过 程 测试 "主要 包含 下 面 两 方面 的 含义 : 

Q@ 测试 人 员 要 充分 关注 开发 过 程 ,对 开发 过 程 的 各 种 变更 及 时 做 出 响应 。 例 如 , 根 
据 开发 进度 计划 的 变更 及 时 调整 测试 进度 和 测试 策略 ,依据 需求 的 变更 及 时 补充 和 完善 
测试 用 例 。 

@ 测试 人 员 要 对 测试 的 全 过 程 进行 跟踪 。 例 如 ,建立 完善 的 度量 和 分 析 机 制 (软件 
度量 将 在 第 10 章 详 细 介绍 ) ,通过 对 自身 过 程 的 度量 ,及 时 了 解 测试 过 程 信息 ,调整 测试 
策略 ,持续 改进 测试 过 程 。 

全 过 程 测试 有 助 于 及 时 应 对 项 目 开发 过 程 中 发 生 的 变更 ,规避 测试 风险 , 且 利 于 更 好 
地 把 握 和 改进 测试 过 程 ,优化 测试 活动 。 

(4) 独立 的 .迭代 的 测试 

独立 的 .和 迭代 的 测试 是 H 模型 倡导 的 理念 。 软 件 开发 瀑布 模型 中 严格 的 阶段 划分 只 
是 一 种 理想 状况 ,大 多 数 的 项 目 开 发 都 存在 需求 分 析 设计、 编码 等 活动 的 迭代 , 故 与 它们 
相对 应 的 测试 工作 也 应 是 可 迭代 的 。 

W 模型 强调 软件 测试 与 软件 开发 应 紧密 结合 ; H 模型 在 此 基础 上 进一步 揭示 ,测试 
与 开发 活动 的 紧密 结合 并 不 意味 着 测试 是 依附 于 开发 活动 的 一 个 过 程 , 测 试 活 动 应 是 独 
立 的 ,可 从 开发 活动 中 剥离 出 来 的 。 测 试 应 成 为 一 个 独立 的 流程 ,只 要 测试 准备 工作 完 
成 ,达到 了 相应 的 测试 就 绪 点 ,测试 的 执行 活动 就 可 以 开展 。 

独立 的 .迭代 的 测试 有 利于 应 对 开发 过 程 复 杂 多 变 的 情况 ,使 测试 工作 更 加 灵活 ,与 
开发 活动 也 结合 得 更 紧密 ,因而 非常 有 利于 全 过 程 测试 。 


2.4 测试 驱动 开发 


2.4.1 测试 驱动 开发 的 概念 
测试 驱动 开发 (Test-Driven Development, TDD) 是 极限 编程 (eXtreme 
Programming,XP) 的 一 个 重要 组 成 部 分 。XP 包含 12 个 团队 实践 ,TDD 是 其 中 之 一 。 
TDD 的 基本 思路 是 通过 测试 推动 整个 开发 的 进行 。 也 就 是 在 明确 要 实现 某 个 功能 
的 开发 后 ,首先 思考 如 何 对 这 个 功能 进行 测试 ,并 完成 测试 代码 的 编写 ;接着 编写 相关 的 
代码 满足 这 些 测试 用 例 ; 然 后 循环 添加 其 他 功能 ,直到 完成 全 部 功能 的 开发。 
测试 驱动 开发 的 基本 步骤 如 下 : 


J 
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了 


Q@ 明确 当前 要 完成 的 功能 点 (所 有 功能 点 记录 在 测试 列表 中 ) 。 

@ 快速 完成 针对 此 功能 的 测试 用 例 编 写 。 

@ 编译 测试 代码 ,结果 为 通 不 过 。 

@ 编写 对 应 的 功能 代码 。 

@ 测试 代码 编译 通过 。 

@ 对 代码 进行 重 构 , 并 保证 全 部 测试 代码 运行 通过 。 

@ 循环 完成 所 有 功能 的 开发 。 

使 用 TDD 进行 开发 的 目的 之 一 是 使 开发 更 好 地 适应 需求 。 需 求 向 来 就 是 软件 开发 
过 程 中 最 不 好 明确 描述 且 易 变 的 东西 ,这 里 所 说 的 需求 不 仅 是 指 用 户 的 需求 ,还 包括 对 代 
码 的 使 用 需求 。 最 令 开发 人 员 感 到 困难 的 就 是 到 了 开发 后 期 还 需要 对 某 个 类 或 者 函数 的 
接口 进行 修改 或 者 扩展 ,发 生 这 类 事情 的 原因 就 在 于 对 这 部 分 功能 代码 的 使 用 需求 没有 
清晰 的 、 可 验证 的 描述 。 

测试 驱动 开发 并 不 事先 编写 某 功能 对 应 的 代码 ,而 是 先 编写 该 功能 代码 的 测试 用 例 ， 
对 该 功能 的 分 解 ,使 用 过 程 . 接 口 进行 设计 ,以 便 很 好 地 描述 对 功能 代码 的 使 用 需求 。 这 
种 描述 清晰 、 可 验证 ,提高 了 功能 代码 的 内 聚 性 和 复 用 性 ,通常 更 符合 后 期 开发 的 需求 和 
可 测试 的 要 求 。 因 此 ,测试 驱动 开发 也 是 一 个 代码 设计 的 过 程 。 使 用 TDD 后 ,设计 、 编 
码 和 测试 三 者 之 间 的 鸿沟 将 不 再 存在 ,促进 了 开发 (测试 ) 人 员 更 好 地 理解 整个 项 目 环境 。 

TDD 可 概括 为 三 方面 的 活动 : 编写 测试 用 例 ,编写 功能 代码 并 进行 测试 ,以 及 重 构 
代码 来 提高 代码 质量 (使 代码 更 简洁 、 灵 活 且 易于 理解 )。 这 个 过 程 将 会 循环 出 现 , 每 一 次 
循环 ,都 会 对 设计 和 编码 进行 优化 ,提升 软件 的 质量 。 

大 多 数 设计 都 是 自 上 而 下 创建 的 ,并 基于 可 观察 的 特性 进行 分 类 ,促进 对 问题 的 理解 
和 解决 。 换 名 话说 ,人 们 试图 创建 层次 结构 的 对 象 , 它 模型 化 了 问题 域 。 但 TDD 与 之 不 
同 , 它 有 利于 自 下 而 上 演进 为 设计 , 即 通过 对 一 些小 问题 依次 实施 一 系列 简单 的 解决 方 
案 ,最终 形成 设计 方案 。 为 保证 这 种 设计 方案 未 偏离 正确 的 路 线 ,TDD 中 每 次 循环 的 最 
后 阶段 要 求 进行 重 构 , 重 构 能 发 现 设计 方案 中 的 错误 ,并 对 设计 进行 优化 。 

值得 注意 的 是 ,在 软件 开发 过 程 中 ,TDD 的 应 用 领域 并 不 仅 限于 代码 编写 阶段 ,还 可 
以 应 用 于 整个 开发 过 程 的 其 他 各 阶段 ,如 需求 分 析 阶段 .设计 阶段 等 。 对 开发 过 程 中 的 某 
阶段 进行 测试 驱动 时 ,首先 应 该 思考 如 何 对 该 阶段 进行 测试 .验证 ,考核 ,并 编写 相关 的 测 
试 文档 或 测试 代码 ,然后 开始 下 一 步 工作 ,最 后 再 验证 相关 的 工作 。 在 后 面 的 文字 中 ， 
TDD 主要 指 用 于 编码 阶段 的 。 

2.4.2 测试 驱动 开发 的 优点 

考虑 实施 TDD 的 最 初 目的 主要 是 ,更 好 地 适应 需求 及 需求 变更 ,简化 开发 过 程 和 缩 
短 开发 周期 。 

当然 ,TDD 带 来 的 好 处 远 不 止 这 些 , 其 优点 还 包括 如 下 几 点 

。 项 目 进度 可 预测 。 而 传统 的 方式 很 难 知道 什么 时 候 编码 工作 结束 。 

。 大 部 分 时 间 代 码 处 在 高 质量 状态 ,100% 的 时 间 里 成 果 是 可 见 的 。 

。 提 供 了 全 面 正确 地 认识 代码 和 利用 代码 的 机 会 ,传统 的 开发 方式 则 没有 这 个 


机 会 。 
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为 利用 已 有 成 果 的 人 提供 Sample, 无 论 是 要 利用 源 代 码 , 还 是 重用 组 件 。 

系统 可 以 与 详尽 的 测试 集 一 起 发 布 ,从 而 对 软件 将 来 版 本 的 扩展 提供 方便 。 

。 将 设计 ,编码 ,测试 融 为 一 体 。 由 于 编写 测试 和 编写 功能 代码 的 是 相同 的 程序 员 ， 
降低 了 理解 代码 所 花费 的 成 本 ;同时 避免 了 设计 角色 ,因为 对 于 一 个 使 用 TDD 技 
术 的 开发 小 组 而 言 ,每 个 人 都 在 进行 设计 。 

。 降低 了 开发 小 组 间 的 交流 成 本 ,提高 了 相互 信赖 程度 。 

由 于 能 清晰 ,无 二 义 地 描述 对 代码 的 需求 ,从 而 减少 了 文档 对 代码 需求 描述 不 清 

而 引入 Bug 的 可 能 。 

在 预先 设计 和 紧急 设计 之 间 建 立 一 种 平衡 点 ,为 开发 (或 测试 ) 人 员 区 分 哪些 设计 

应 该 事先 做 ,哪些 设计 应 该 闪 代 时 做 提供 了 一 个 可 靠 的 判断 依据 , 即 避 免 了 过 度 

设计 。 

有 利于 发 现 比 传统 测试 方式 更 多 的 Bug。 

。 使 IDE 的 调试 功能 失去 意义 ,避免 了 令 人 头痛 的 调试 。 

2.4.3 测试 驱动 开发 的 原则 

对 测试 驱动 开发 的 概念 有 较 清楚 的 认识 后 ,在 实施 TDD 的 过 程 中 还 应 注意 遵循 如 
下 原则 ， 

Oz 测试 隔离 。 不 同 代码 的 测试 应 该 相互 隔离 。 对 一 块 代码 的 测试 只 考虑 此 代码 的 
测试 ,不 要 考虑 其 实现 细节 ,例如 它 是 否 使 用 了 其 他 类 的 边界 条 件 。 

@ 专注 于 当前 工作 。 开 发 人 员 在 开发 过 程 中 要 做 不 同 的 工作 ,如 编写 测试 代码 、 开 
发 功能 代码 .对 代码 重 构 等 。 开 发 人 员 完 成 对 应 的 工作 时 应 该 保持 注意 力 集中 在 当前 工 
作 上 ,而 不 要 过 多 地 考虑 其 他 方面 的 细节 ,无 谓 地 增加 工作 复杂 度 。 

@ 防止 过 度 设计 。 编 写 功能 代码 时 应 该 关注 于 完成 当前 功能 点 ,通过 测试 ,使 用 最 
简单 .直接 的 方式 编码 。 过 多 地 考虑 后 期 的 扩展 .其 他 功能 的 添加 , 则 会 增加 问题 的 复杂 
性 ,反而 容易 产生 问题 。 实 际 上 ,在 要 添加 这 些 特性 时 ,有 整套 测试 用 例 做 基础 ,通过 不 断 
重 构 是 较 容易 实现 的 。 

@ 及 时 补充 测试 列表 。 在 开发 过 程 中 ,对 软件 功能 点 的 需求 可 能 不 断 变 更 和 增加 。 
在 任何 阶段 车 需 添加 某 功 能 需求 时 ,应 当 把 该 功能 点 加 到 测试 列表 中 ,再 继续 手头 工作 。 
这 样 可 以 避免 功能 的 疏漏 ,也 避免 干扰 当前 进行 的 工作 , 待 到 以 后 的 循环 中 再 完成 刚 添加 
进 测试 列表 的 功能 点 。 

@ 先 写 断 言 (Assertion) 。 测 试 代码 编 写 时 ,应 该 首先 编写 用 于 对 功能 代码 的 判断 的 
断言 语句 ,然后 再 编写 相应 的 辅助 语句 。 

@ 及 时 重 构 。 代 码 简洁 可 用 是 测试 驱动 开发 所 追求 的 主要 目标 ,其 实 这 是 为 了 优化 
设计 和 编码 。 无 论 是 功能 代码 还 是 测试 代码 ,对 代码 中 存在 的 重复 、 结 构 不 合理 等 情况 ， 
在 测试 通过 后 ,应 及 时 进行 重 构 加 以 消除 。 

应 该 把 重 构 看 成 一 种 书写 代码 的 方式 或 习惯 , 重 构 随 时 都 有 可 能 发 生 。 在 测试 驱动 
开发 中 ,除去 编写 测试 用 例 和 实现 测试 用 例 之 外 的 所 有 工作 都 是 重 构 。 所 以 ,没有 重 构 任 
何 设计 都 不 能 实现 。 至 于 什么 时 候 重 构 , 可 遵照 如 下 的 思路 : 

Q@ 实现 测试 用 例 后 重 构 代码 ; 


~ 
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@ 完成 某 个 特性 后 重 构 设计 ; 

@ 产品 的 重 构 完 成 后 对 测试 用 例 重 构 。 

关于 测试 驱动 开发 实例 ,可 参见 5. 5. 3 小 节 。 

2.4.4 关于 测试 驱动 开发 的 一 些 讨论 

(1) 是 写 测 试 代码 还 是 写 测 试 文档 

测试 代码 非常 简单 ,通常 是 围绕 某 个 情况 的 正确 性 判断 的 几 个 语句 。 如 果 功 能 点 太 
复杂 ,就 应 该 对 其 进行 分 解 ,直至 可 用 简单 的 测试 代码 来 表达 需求 。 

传统 的 开发 过 程 通 常 强 调 的 是 用 测试 文档 来 指导 测试 。 但 随 着 软件 规模 的 日 渐 庞 
大 ,开发 节奏 的 不 断 加 快 ,用 户 需 求 的 复杂 多 变 ,维护 高 层 ( 需 求 分 析 、 概 要 设计 ) 的 测试 文 
档 是 可 行 的 ,但 低层 的 测试 文档 (如 详细 设计 及 编码 阶段 的 测试 文档 ) 的 维护 成 本 则 太 高 。 

因而 ,在 详细 设计 阶段 及 编码 阶段 ,应 通过 测试 代码 取代 测试 文档 来 驱动 开发 。 这 样 
做 并 不 完全 是 出 于 节约 成 本 的 考虑 。 实 际 上 ,清晰 .可 实时 验证 功能 正确 性 的 测试 代码 就 
是 对 功能 代码 最 好 的 测试 文档 。 

(2) 何 时 停止 编写 测试 用 例 ( 即 测试 的 粒度 问题 ) 

测试 驱动 开发 的 思想 强调 测试 不 应 该 是 开发 过 程 中 的 负担 ,而 是 帮助 我 们 减轻 工作 
量 的 方法 。 何 时 停止 编写 测试 用 例 ,应 根据 测试 人 员 的 经 验 而 定 ,复杂 、 核 心 的 功能 代码 
应 该 编写 更 全 面 、 细 致 的 测试 用 例 。 

对 大 的 功能 点 测试 和 实现 时 ,可 先 拆 分 成 更 小 的 功能 点 进行 测试 。 比 如 ,一 个 类 A 
使 用 了 类 B,C, 就 应 先 完成 对 B,C 的 测试 和 开发 。 但 这 并 不 意味 着 每 个 小 类 或 者 小 函数 
都 应 该 测试 。 测 试 人 员 应 该 运用 自己 的 经 验 , 对 那些 可 能 出 问题 的 地 方 重点 测试 ,其 他 地 
方 等 它 真正 出 问题 时 再 补 测试 代码 即 可 。 

(3) 何 时 设计 

许多 人 在 依照 TDD 开发 软件 时 常 被 这 个 问题 困扰 ,总 是 觉得 有 些 问题 应 该 在 写 测 
试用 例 之 前 定 下 来 ,而 有 些 问 题 应 该 在 新 增 测 试用 例 的 过 程 中 自然 出 现 。 

实际 上 ,设计 和 测试 在 TDD 中 没有 严格 的 先后 和 界限 。 如 前 所 述 ,TDD 机 制 有 利于 
自 下 而 上 演进 为 设计 , 即 通 过 对 一 些小 问题 ,依次 实施 一 系列 简单 的 解决 方案 ,最 后 形成 
设计 方案 ;再 通过 重 构 保证 设计 是 正确 的 、 被 优化 的 。 

当然 ,这 并 不 是 说 ,设计 在 TDD 中 是 完全 不 需要 的 ,也 不 意味 着 在 TDD 中 设计 完全 
是 由 测试 衍生 出 的 。 

TDD 中 设计 的 时 机 应 该 由 开发 者 自己 把 握 ,不 要 受到 TDD 方式 的 限制 。 但 是 ,不 需 
要 事先 设计 的 方面 一 定 不 要 马上 去 考虑 ,以 免 增加 问题 的 复杂 性 。 也 就 是 说 ,应 避免 过 度 
设计 。 

(4) 为 一 个 特性 编写 测试 用 例 还 是 为 一 个 类 编写 测试 用 例 

虽然 TDD 的 说 明 书 上 说 应 该 为 一 个 特性 (feature) 编 写 相 应 的 测试 用 例 ,但 为 什么 
著名 的 TDD 大 师 所 写 的 测试 用 例 都 是 与 类 /方法 一 一 对 应 的 呢 ? 

为 避免 设计 上 的 重大 失误 ,通常 人 们 针对 特性 编写 测试 用 例 ,但 若 某 个 特性 无 法 用 测 
试用 例 表 达 , 则 会 将 这 个 特性 细 分 ,直到 可 以 为 细 分 后 的 特性 写 出 测试 用 例 为 止 。 

之 后 , 随 着 不 断 地 重 构 代 码 及 测试 用 例 ,不断 地 依据 TDD 进行 开发 ,最 后 当 产 品 伴 
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随 测试 用 例 集 一 起 发 布 的 时 候 , 经 过 重 构 以 后 的 测试 用 例 很 可 能 就 是 与 产品 中 的 类 /方法 
一 一 对 应 的 。 

(5) 何 时 应 将 全 部 测试 都 运行 一 遍 

测试 驱动 开发 的 思想 要 求 我 们 在 每 次 重 构 之 后 都 应 完整 地 运行 全 部 测试 用 例 , 因 为 
重 构 很 可 能 会 改变 整个 代码 的 结构 或 设计 ,使 原来 通过 的 测试 用 例 现在 不 能 通过 ,也 就 是 
说 可 能 导致 不 可 预见 的 后 果 。 但 有 两 种 情况 会 使 每 次 重 构 之 后 都 完整 运行 全 部 测试 用 例 
的 要 求 难以 实现 。 这 是 因为 正在 开发 的 是 一 个 大 型 的 项 目 ( 如 ERP 系统 ), 所 有 测试 用 例 
运行 一 遍 可 能 将 花费 数 个 小 时 ;并 且 重 构 由 工具 来 完成 (现在 的 情况 大 都 如 此 ) ,不 由 人 所 
控制 。 

基于 这 两 种 情况 ,在 条 件 不 允许 时 ,可 以 挑选 几 个 我 们 认为 可 能 受到 本 次 重 构 影响 的 
测试 用 例 去 运行 。 

(6) 什么 场合 不 适合 使 用 TDD 

对 软件 质量 要 求 极 高 的 军事 或 科研 产品 、 人 命 关 天 的 软件 等 不 适用 TDD。 


2.5 软件 测试 的 原则 


为 了 尽 可 能 发 现 软件 中 的 错误 ,提高 软件 产品 的 质量 ,在 软件 测试 的 实践 中 ,应 把 握 
的 测试 原则 主要 有 如 下 几 条 : 

。 应 尽早 全面 .全 过 程 ,独立 地 开展 测试 活动 。 
所 有 的 测试 标准 应 建立 在 满足 用 户 需求 的 基础 上 ,软件 中 的 最 严重 错误 是 那些 导 
致 用 户 需求 无 法 满足 的 错误 。 
程序 员 应 避免 检查 自己 的 程序 ,避免 因 心理 因素 造成 的 一 系列 不 良 影响 ,毕竟 否 
认 自 己 的 工作 成 果 是 件 不 愉快 的 事 。 
设计 测试 用 例 时 ,应 该 考虑 合法 的 输入 和 不 合法 的 输入 ,以 及 各 种 边界 条 件 ; 特 殊 
情况 下 要 制造 极端 状态 和 意外 状态 ,以 检验 软件 在 各 种 可 能 的 情况 下 能 否 正常 
工作 。 
要 充分 注意 测试 中 错误 的 集中 发 生 现象 ,这 与 程序 员 的 编程 习惯 有 很 大 的 关系 。 
对 测试 中 发 现 的 错误 应 当 有 一 个 确认 的 过 程 ,严重 的 错误 可 以 召开 评审 会 进行 讨 
论 和 分 析 。 
制定 严格 的 测试 计划 并 执行 之 ,杜绝 测试 的 随意 性 ,并 把 测试 时 间 安 排 得 尽量 宽 
松 , 不 要 希望 在 极 短 的 时 间 内 完成 一 个 高 水 平 测试 。 
充分 重视 回归 测试 ,防止 因 出 现 修改 一 个 错误 或 新 增 一 个 功能 而 造成 软件 出 错 的 
妥善 保存 一 切 测试 文档 。 测 试 文档 能 对 测试 工作 进行 指导 和 提供 评价 ,并 为 后 续 
的 测试 工作 提供 依据 。 
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2.6 软件 测试 文档 


2.6.1 软件 测试 文档 概述 

软件 测试 贯穿 于 开发 的 全 过 程 ,是 一 项 复杂 的 工作 。 应 当 把 测试 也 当 作 一 个 项 目 , 对 
其 进行 有 效 的 计划 和 管理 。 软 件 测 试 文档 (Software Test Documentation ) 为 测试 项 目的 
组 织 .规划 和 管理 提供 了 一 个 架构 。 

在 测试 的 前 期 和 测试 过 程 中 都 需 建立 相应 的 测试 文档 ,并 应 根据 需求 的 变更 及 时 调 
整 测试 文档 。 

软件 测试 文档 主要 包括 测试 计划 ,测试 设计 、 测 试用 例 、 测 试 规程 .测试 事件 报告 、 测 

为 了 统一 测试 文档 的 书写 标准 ,IEEE/ANSI 制定 了 829 一 1983 标准 (修订 版 为 
829 一 1998 标准 )。 还 有 其 他 的 一 些 标准 也 用 于 指导 软件 测试 文档 的 编写 ,如 我 国 制定 的 
《计算 机 软件 测试 文件 编制 规范 》(GB/T 9386 一 1988) 。 

标准 化 的 测试 文档 如 同一 种 通用 的 参照 体系 ,可 以 达到 便于 交流 的 目的 。 文 档 中 所 
规定 的 内 容 可 以 作为 对 测试 过 程 完备 性 的 对 照 检查 表 , 故 有 助 于 提高 测试 过 程 中 每 个 阶 
段 的 能 见 度 , 极 大 地 提高 测试 工作 的 可 管理 性 。 
2.6.2 《计算 机 软件 测试 文件 编制 规范 )(GB/T 9386 一 1988) 简 介 

下 面 对 我 国 制定 的 4 计算 机 软件 测试 文件 编制 规范 》(GB/T 9386 一 1988) (以 下 简称 
规范 ) 进 行 简要 介绍 。 

1. 引用 标准 

该 规范 的 引用 标准 为 : 

。 GB/T 11457 软件 工程 术语 ; 

"。GB 8566 计算 机 软件 开发 规范 ; 

。 GB 8567 计算 机 软件 产品 开发 文件 编制 指南 。 

2. 关键 术语 定义 

对 该 规范 中 使 用 的 关键 术语 定义 如 下 。 

。 设计 层 (Design Level) 

软件 项 的 设计 分 解 , 如 系统 、 子 系统 ,程序 或 模块 。 

。 通过 准则 (Pass Criteria) 

一 个 软件 项 或 软件 特性 的 测试 是 否 通过 的 判别 依据 。 

。 软件 特性 (Software Feature) 

软件 项 的 显著 特性 (如 功能 、 性 能 或 可 移植 性 等 ) 。 

。 软件 项 (Software Item) 

源 代码 .目标 代码 .作业 控制 代码 控制 数据 或 这 些 项 的 集合 。 

。 测试 项 (Test Item) 

作为 测试 对 象 的 软件 项 。 
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3. 规范 的 主要 内 容 

该 规范 确定 了 各 个 测试 文件 的 格式 和 内 容 , 所 提出 的 文件 类 型 包括 测试 计划 ,测试 说 
明和 测试 报告 。 

测试 计划 (Test Plan) 描述 测试 活动 的 范围 .方法 .资源 和 进度 。 它 规定 被 测试 
的 项 .被 测试 的 特性 .应 完成 的 测试 任务 .担任 各 项 工作 的 人 员 职 责 及 与 本 计划 有 关 的 风 

测试 说 明 包 括 以 下 3 类 文件 : 

(1) 测试 设计 (Test Design) 说 明 。 详 细 描 述 测 试 方法 ,规定 该 设计 及 其 有 关 测 试 所 
包括 的 特性 ,还 规定 完成 测试 所 需 测试 用 例 和 测试 规程 ,并 规定 特性 的 通过 准则 。 

(2) 测试 用 例 说 明 。 列 出 用 于 输入 的 具体 值 及 预期 的 输出 结果 ,并 规定 在 使 用 具体 
测试 用 例 时 ,对 测试 规程 的 各 种 限制 。 将 测试 用 例 与 测试 设计 分 开 , 可 以 使 它们 用 于 多 个 
设计 并 能 在 其 他 情形 下 重复 使 用 。 

(3) 测试 规程 (Test Procedure) 说 明 。 规 定 对 于 运行 系统 和 执行 指定 的 测试 用 例 来 
实现 有 关 测试 设计 所 要 求 的 所 有 步骤 。 

测试 报告 (Test Report) 包 括 以 下 4 类 文件 : 

(1) 测试 项 传递 报告 。 指 明 在 开发 组 和 测试 组 独立 工作 的 情况 下 或 者 在 希望 正式 开 
始 测试 的 情况 下 为 进行 测试 而 被 传递 的 测试 项 。 

(2) 测试 日 志 。 测 试 组 用 于 记录 测试 执行 过 程 中 发 生 的 情况 。 

(3) 测试 事件 报告 。 描 述 在 测试 执行 期 间 发 生 并 需 进 一 步调 查 的 一 切 事件 。 

(4) 测试 总 结 报告 。 总 结 与 测试 设计 说 明 有 关 的 测试 活动 。 


4. 对 规范 的 实施 

使 用 该 规范 的 每 个 单位 ,要 规定 测试 阶段 所 应 有 的 特定 文件 ,并 在 测试 计划 中 规定 测 
试 完成 后 所 能 提交 的 全 部 文件 。 对 于 不 同 的 设计 层 或 不 同 规模 的 软件 ,所 选 文件 的 种 类 
也 可 有 所 不 同 。 

在 所 提供 的 每 个 标准 文件 中 ,每 一 章 的 内 容 对 于 具体 的 应 用 和 特定 的 测试 阶段 可 以 
有 所 增 减 。 不 仅 可 以 调整 内 容 ,还 可 以 在 基本 文件 集中 增加 另外 的 文件 。 任 何 一 个 文件 
都 可 以 增加 新 的 内 容 , 并 且 某 章 车 无 可 写 的 内 容 , 则 可 不 写 , 但 须 保留 该 章 编 号 。 使 用 该 
规范 的 每 个 单位 应 该 补充 规定 对 内 容 的 要 求 和 约定 ,以 便 反 映 自己 在 测试 .文件 控制 、 配 
置 管理 和 质量 保证 方面 所 用 的 特定 方法 、 设 备 和 工具 。 

图 2-5 反映 了 规范 中 各 类 测试 文档 之 间 的 关系 ,同时 也 在 一 定 程度 上 反映 了 测试 的 
流程 。 

以 下 是 规范 中 的 文件 编制 实施 和 使 用 指南 。 

(1) 实施 指南 

在 实施 测试 文件 编制 的 初始 阶段 ,可 先 编写 测试 计划 与 测试 报告 文件 。 测 试 计划 为 
整个 测试 过 程 提供 基础 。 测 试 报告 将 鼓励 测试 单位 以 良好 的 方式 记录 整个 测试 过 程 的 
情况 。 

经 过 一 段 时 间 的 实践 后 ,积累 了 一 定 的 经 验 之 后 再 逐步 引进 其 他 文件 。 测 试 文件 编 
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测试 项 


测试 计划 


测试 设计 
说 明 


测试 设计 
说 明 


本 规范 规定 
1 一 | 的 文件 


Ee 本 规范 未 规 
罗 革 丰 | 到 定 的 文件 


测试 事件 测试 事件 测试 项 (本 规 
报告 | 是 范 未 规定 ) 
和 一 本 规范 未 规 
潮流 冲 结 [__ J 定 的 处 理 


图 2-5 规范 中 各 类 测试 文档 之 间 的 关系 


制 最 终 将 形成 一 个 相应 于 设计 层 的 文件 层次 , 即 系统 测试 文件 . 子 系统 测试 文件 及 模块 测 
试 文件 等 。 在 本 单位 所 使 用 的 、 特 定 的 测试 技术 的 文件 编制 可 以 作为 正文 所 述 的 基本 文 
件 集 的 补充 。 

(2) 用 法 指南 

在 项 目 计划 和 单位 标准 中 ,应 该 指明 在 哪些 测试 活动 中 需要 哪些 测试 文件 ,并 可 在 文 
件 中 加 入 一 些 内 容 , 使 各 个 文件 适应 一 个 特定 的 测试 项 及 一 个 特定 的 测试 环境 。 

表 2-1 是 一 个 在 多 种 测试 活动 中 所 需 测 试 文件 的 例子 ,所 需 文件 数量 将 因 单 位 
而 异 。 


表 2-1 一 个 测试 文件 的 编制 实例 


测试 设 | 测试 用 | 测试 规 | 测试 项 传 测试 事 测试 总 

四 计 说 明 | 例 说 明 | 程 说 明 | 递 报告 站 件 报告 结 报告 
验收 V Vv Sh Nh ~V - NA ~ 
安装 NA ~V 三 ~ = ~ V 
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续 表 

测试 设 | 测试 用 | 测试 规 | 测试 项 传 测试 事 测试 总 

i 计 说 明 | 例 说 明 | 程 说 明 | 递 报告 测 吕 件 报告 结 报告 
系统 ~ V ~ V/ V/ V/ ~ ~ 
子 系统 一 一 V/ V V ~ V V 
模块 一 V V/ ~ 


2.6.3 ”规范 GB/T 9386 一 1988 内 容 要 求 

以 下 是 该 规范 中 各 个 测试 文件 的 书写 格式 及 内 容 。 对 于 每 一 个 文件 而 言 , 都 包含 若 
干草, 其 内 部 各 章 应 按 指定 的 次 序 排列 ,补充 的 章 可 以 放 在 最 后 或 放 在 “批准 ”一 章 的 前 面 
(如 果 该 文件 最 后 一 章 是 “批准 ”)。 

如 果 某 章 的 部 分 或 全 部 内 容 在 另 一 个 文件 中 , 则 应 在 相应 的 内 容 位 置 上 列 出 所 引用 
的 材料 。 引 用 的 材料 必须 附 在 该 文件 后 面 ,或 交 给 文件 的 使 用 者 。 

1. 测试 计划 

测试 计划 共 16 章 ,结构 如 图 2-6 所 示 。 

每 一 章 的 详细 内 容 如 下 。 


(1) 测试 计划 名 称 


(1) 测试 计划 名 称 ( 该 计划 的 第 1 章 ) (2) 引言 
I 人 老 灾 (3) 测试 项 
为 该 测试 计 划 下 个 专用 的 名 称 。 0 
(2) 引言 (第 2 章 ) (5) 不 被 测试 特性 
归纳 所 要 求 测试 的 软件 项 和 软件 特性 ,可 以 包括 (6) 方法 
系统 的 目标 .背景 ,范围 和 引用 材料 等 。 57) 项 通过 准则 


(8) 暂停 标准 和 再 启动 要 求 


在 最 高 层 测试 计划 中 ,如 果 存 在 项 目 计划 ,质量 保 | (9) 应 所 伐 的 测试 文件 


证 计划 、 有 关 的 政策 有 关 的 标准 等 文件 , 则 需要 引用 (10) 测试 任务 
如 机 (11) 环境 要 求 
(12) 职责 


(3) 测试 项 (第 3 章 ) 

描述 被 测试 的 对 象 ,包括 其 版 本 、 修 订 级 别 ,并 指 
出 在 测试 开始 之 前 对 逻辑 或 物理 变换 的 要 求 。 

(4) 被 测试 特性 (第 4 章 ) 

指明 所 有 被 测试 的 软件 特性 及 其 组 合 , 指 明 每 个 
特性 或 特性 组 合 有 关 的 测试 设计 说 明 。 

(5) 不 被 测试 特性 (第 5 章 ) 


(13) 人 员 和 训练 要 求 
(14) 进度 

(15) 风险 和 应 急 
(16) 批准 


图 2-6 测试 计划 


指出 不 被 测试 的 所 有 特性 和 特性 的 有 意义 的 组 合 及 其 理由 。 


(6) 方法 (第 6 章 ) 


描述 测试 的 总 体 方法 ,规定 测试 指定 特性 所 需 的 主要 活动 .技术 和 工具 ,详尽 地 描述 
方法 ,以 便 列 出 主要 的 测试 任务 ,并 估计 执行 各 项 任务 所 需 的 时 间 ; 规 定 所 希望 的 最 低 程 
度 的 测试 彻底 性 ,指明 用 于 判断 测试 彻底 性 的 技术 ,例如 检查 哪些 语句 至 少 执行 过 一 次 ; 
指出 对 测试 的 主要 限制 ,例如 测试 项 可 用 性 、 测 试 资源 的 可 用 性 和 测试 截止 期 限 等 。 
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(7) 项 通过 准则 (第 7 章 ) 

规定 各 测试 项 的 测试 标准 。 

(8) 暂停 标准 和 再 启动 要 求 ( 第 8 章 ) 

规定 用 于 暂停 全 部 或 部 分 与 该 计划 有 关 的 测试 项 的 测试 活动 标准 ;规定 测试 再 启动 
时 必须 重复 的 测试 活动 。 

(9) 应 提供 的 测试 文件 (第 9 章 ) 

规定 测试 完成 后 所 应 递交 的 文件 ,这 些 文件 可 以 是 前 述 8 个 文件 的 全 部 或 者 部 分 。 

(10) 测试 任务 (第 10 章 ) 

指明 执行 测试 所 需 的 任务 集合 ,指出 任务 间 的 一 切 依 赖 关 系 和 所 需 的 一 切 特殊 技能 。 

(11) 环境 要 求 (第 11 章 ) 

规定 测试 环境 所 必 备 的 和 和 希望 的 性 质 ,包括 硬件 .通信 和 系统 软件 的 物理 特征 、 使 用 
方式 以 及 任何 其 他 支撑 测试 所 需 软 件 或 设备 ;指出 所 需 的 特殊 测试 工具 及 其 他 测试 要 求 ， 
例如 出 版 物 或 办 公 场 地 等 ;指出 测试 组 目前 还 不 能 得 到 的 所 有 要 求 的 来 源 。 

(12) 职责 (第 12 章 ) 

指出 负责 管理 .设计 、 准 备 .执行 ,监督 .检查 和 仲裁 的 小 组 ,以 及 负责 提供 测试 计划 中 
的 测试 项 和 测试 计划 中 的 环境 要 求 的 小 组 。 

这 些小 组 可 以 包括 开发 人 员 、 测 试 人 员 、 操 作 员 .用 户 代表 、 数 据 管理 员 和 质量 保证 
人 员 。 

(13) 人 员 和 训练 要 求 (第 13 章 ) 

指明 测试 人 员 应 有 的 水 平 ,以 及 为 掌握 必要 技能 可 供 选 择 的 训练 科目 。 

(14) 进度 (第 14 章 ) 

包括 在 软件 项 目 进度 中 规定 的 测试 里 程 碑 ,以 及 所 有 测试 项 传递 时 间 。 

定义 所 需 的 新 的 测试 里 程 碑 ,估计 完 成 每 项 测试 任务 所 需 的 时 间 ,为 每 项 测试 任务 和 
测试 里 程 碑 规 定 进度 ,对 每 项 测试 资源 规定 使 用 期 限 。 

(15) 风险 和 应 急 ( 第 15 章 ) 

预测 测试 计划 中 的 风险 ,规定 对 各 种 风险 的 应 急 措施 ,例如 延期 传递 的 测试 项 可 能 需 
要 加 夜班 来 赶 上 规定 的 进度 。 

(16) 批准 (第 16 章 ) 

规定 该 计划 的 审批 者 (姓名 和 职务 ) ,为 签名 和 填写 日 期 留 出 空间 。 


2. 测试 设计 说 明 


测试 设计 说 明 共 5 章 , 如 图 2-7 所 示 。 人 
下 面 给 出 每 一 章 的 详细 内 容 。 (2) 被 测试 特性 

(1) 测试 设计 说 明 名 称 (该 说 明 的 第 1 章 ) (3) 方法 详 述 

给 每 一 个 测试 设计 说 明 取 一 个 专用 名 称 。 如 果 存 | 5 让 让 国 亿 各 


在 ,也 可 以 引用 有 关 的 测试 计划 中 给 出 的 名 称 。 
(2) 被 测试 特性 (第 2 章 ) 图 2-7 测试 设计 说 明 
规定 测试 项 ,描述 作为 该 设计 测试 目标 的 特性 和 特性 的 组 合 ,其 他 特性 可 以 论 及 ,但 
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不 必 测 试 。 

(3) 方法 详 述 (第 3 章 ) 

将 测试 计划 中 规定 的 方法 进行 细 化 ,包括 要 用 的 具体 测试 技术 ,规定 分 析 测试 结果 的 
方法 (如 比较 程序 或 人 工 观察 ) 。 

规定 为 选择 测试 用 例 提供 合理 依据 的 一 切 分 析 结 果 。 例 如 ,可 以 说 明 容 错 的 条 例 (如 
区 别 有 效 输入 和 无 效 输入 的 条 件 )。 

归纳 所 有 测试 用 例 的 共同 属性 ,包括 输入 约束 条 件 、 对 共享 环境 的 要 求 .对 共享 的 特 
殊 规程 的 要 求 及 任何 共享 的 测试 用 例 间 的 依赖 关系 。 

(4) 测试 用 例 名 称 (第 4 章 ) 

列 出 与 该 测试 设计 说 明 有 关 的 每 一 个 测试 用 例 的 名 称 和 简要 说 明 , 其 中 某 个 特定 的 
测试 用 例 可 能 在 多 个 测试 设计 说 明 中 出 现 。 

(5) 特性 通过 准则 (第 5 章 ) 

规定 用 于 判别 特性 和 特性 组 合 是 否 通过 测试 的 准则 。 

3. 测试 用 例 说 明 

测试 用 例 说 明 共 7 章 , 结 构 如 图 2-8 所 示 。 由 于 测试 「 测试 用 例 说 明和 名称 
用 例 可 能 被 由 多 个 小 组 长 期 使 用 的 多 个 测试 设计 说 明 引 ”| (2) 测试 项 
用 ,所 以 在 测试 用 例 说 明 中 必须 包含 足够 具体 的 信息 以 便 。 | 3) 输入 说 明 


(4) 输出 说 明 

重复 使 用 。 (5) 环境 要 求 
下 面 给 出 每 一 章 的 详细 内 容 。 (6) 特殊 的 规程 要 求 
(1) 测试 用 例 说 明 名 称 (第 1 章 ) (7) 用 例 间 的 依赖 关系 
给 该 测试 用 例 说 明 取 一 个 专用 名 称 。 图 2-8 测试 用 例 说 明 


(2) 测试 项 (第 2 章 ) 
规定 并 简要 说 明 该 测试 用 例 所 涉及 的 项 和 特性 ,对 于 每 一 项 ,可 以 考虑 引用 以 下 文件 : 需 
求 说 明 书 、 设 计 说 明 书 . 用 户 手册 和 操作 手册 。 

(3) 输入 说 明 ( 第 3 章 ) 

规定 执行 测试 用 例 所 需 的 输入 。 有 些 输入 可 以 用 值 ( 允 许 适当 的 误差 ) 规 定 ; 而 
另 一 些 输 入 ,如 常数 表 或 事务 文件 可 以 用 名 来 规定 。 规 定 所 有 合适 的 数据 库 \ 文 件 、 终 
端 信息 、 内 存 常 驻 区 域 和 由 操作 系统 传送 的 值 ,规定 各 输入 间 所 需 所 有 关系 (如 时 序 关 
系 等 )。 

(4) 输出 说 明 ( 第 4 章 ) 

规定 测试 项 的 所 有 输出 和 特性 ,例如 响应 时 间 。 提 供 各 个 输出 或 特性 的 正确 值 ( 在 适 
当 的 误差 范围 内 ) 。 

(5) 环境 要 求 (第 5 章 ) 

DO 硬件。 规定 执行 该 测试 用 例 所 需 硬 件 特征 和 配置 。 

@ 软件 。 规 定 执行 该 测试 用 例 所 需 系 统 软 件 和 应 用 软件 。 系 统 软件 可 以 包括 操作 
系统 、 编 译 程序 .模拟 程序 和 测试 工具 等 。 

@ 其 他 。 说 明 所 有 其 他 要 求 ,如 特种 设施 要 求 或 经 过 专门 训练 的 人 员 等 。 


有 
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(6) 特殊 的 规程 要 求 (第 6 章 ) 

描述 对 执行 该 测试 用 例 的 测试 规程 的 一 切 特殊 限制 。 这 些 限制 可 以 包括 特定 的 准 
备 , 操 作 人 员 的 干预 ,确定 特殊 的 输出 和 清除 过 程 。 

(7) 用 例 间 的 依赖 关系 (第 7 章 ) 

列 出 必须 在 该 测试 用 例 之 前 执行 的 测试 用 例 名 称 ,归纳 依赖 性 质 。 


4. 测试 规程 说 明 

测试 规程 说 明 共 4 章 , 结 构 如 图 2-9 所 示 。 

下 面 给 出 每 一 章 的 详细 内 容 。 (1) 测试 规程 说 明 名 称 
(1) 测试 规程 说 明 名 称 (该 说 明 的 第 1 章 ) (2) 目的 


给 每 个 测试 规程 说 明 取 一 个 专用 名 称 ,给 出 对 有 关 this 
测试 设计 说 明 的 引用 。 

(2) 目的 (第 2 章 ) 图 2-9 测试 规程 说 明 

描述 该 规程 的 目的 。 如 果 该 规程 执行 测试 用 例 , 则 引用 各 有 关 的 测试 用 例 说 明 。 

(3) 特殊 要 求 (第 3 章 ) 

指出 执行 该 规程 所 需 的 所 有 特殊 要 求 , 包 括 作为 先决 条 件 的 规程 .专门 技能 要 求 和 特 
殊 环 境 要 求 。 

(4) 规程 步骤 (第 4 章 ) 

Q@ 日 志 。 说 明 用 来 记录 测试 的 执行 结果 ,观察 到 的 事件 和 其 他 与 测试 有 关 的 事件 
( 见 测试 日 志和 测试 事件 报告 ) 的 所 有 特殊 方法 或 格式 。 

@ 准备 。 描 述 新 任务 执行 规程 所 必需 的 动作 序列 。 

@ 启动 。 描 述 开始 执行 规程 所 必需 的 动作 。 

@ 处 理 。 描 述 在 规程 执行 过 程 中 所 必需 的 动作 。 

@ 度量 。 描 述 如 何 进行 测试 度量 。 

@ 暂停 。 描 述 因 发 生意 外 事件 暂停 测试 所 必需 的 动作 。 

@ 再 启动 。 规 定 所 有 再 启动 点 和 在 启动 点 上 重新 启动 规程 所 必需 的 动作 。 

@ 停止 。 描 述 正常 停止 执行 时 所 必需 的 动作 。 

@ 清除 。 描 述 恢复 环境 所 必需 的 动作 。 

@ 应 急 。 描 述 处 理 执行 过 程 中 可 能 发 生 的 异常 事件 所 必需 的 动作 。 


5. 测试 项 传递 报告 

测试 项 传递 报告 共 5 章 ,结构 如 图 2-10 所 示 。 

下 面 给 出 该 报告 每 一 章 的 详细 内 容 。 

(1) 传递 报告 名 称 (该 报告 的 第 1 章 ) 

为 该 测试 项 传递 报告 取 一 个 专用 名 称 。 

(2) 传递 项 (第 2 章 ) 

规定 被 传递 的 项 及 其 版 本 /修订 级 别 ; 提 供与 传递 项 有 关 的 项 文件 和 测试 计划 的 相关 
信息 ,指出 对 该 传递 项 负责 的 人 员 。 

(3) 位 置 (第 3 章 ) 
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规定 传递 项 的 位 置 及 其 所 在 媒体 。 

(4) 状态 (第 4 章 ) 

描述 被 传递 的 测试 项 的 状态 ,包括 其 与 项 文件 .这 些 项 的 以 往 传递 及 测试 计划 的 差 
别 ; 列 出 希望 由 被 传递 项 解决 的 事件 报告 。 

(5) 批准 (第 5 章 ) 

规定 该 传递 报告 必须 审批 者 (姓名 和 职务 ) ,并 为 签名 和 日 期 留 出 空间 。 


6. 测试 日 志 
测试 日 志 共 3 章 , 如 图 2-11 所 示 。 


(1) 传递 报告 名 称 

(2) 传递 项 

(3) 位 置 (1) 测试 日 志 名 称 

(4) 状态 (2) 描述 

(5) 批准 (3) 活动 和 事件 条 目 
图 2-10 测试 项 传递 报告 图 2-11 测试 日 志 


下 面 给 出 每 一 章 的 详细 内 容 。 

(1) 测试 日 志 名 称 ( 该 日 志 的 第 1 章 ) 

为 该 测试 日 志 取 一 专用 的 名 称 。 

(2) 描述 (第 2 章 ) 

除了 在 日 志 条 目 中 特别 注 明 的 以 外 ,用 于 日 志 中 所 有 条 目的 信息 都 包括 在 这 一 章 中 。 
应 该 考虑 有 以 下 信息 : 

。 规定 被 测试 项 及 其 版 本 /修订 级 别 。 如 果 存 在 ,引用 各 项 的 传递 报告 。 

。 规定 完成 测试 的 环境 属性 ,包括 设备 说 明 、 所 用 硬件 、 所 用 系统 软件 及 可 用 存储 容 

量 等 可 用 资源 。 

(3) 活动 和 事件 条 目 ( 第 3 章 ) 

对 每 个 事件 (包括 事件 的 开始 和 结束 ) ,记录 发 生 的 日 期 和 时 间 , 并 说 明 记录 者 。 应 考 
虑 以 下 各 项 信息 : 

。 执行 描述 。 记 录 所 执行 的 测试 规程 的 名 称 ,并 引用 该 测试 规程 说 明 。 记 录 执 行 时 
在 场 人 员 包 括 测试 者 ,操作 员 和 观察 员 , 还 要 说 明 每 个 人 的 作用 。 
测试 结果 。 对 每 次 执行 ,记录 人 工 可 观察 到 的 结果 (如 产生 的 错误 信息 、 异 常 中 止 
和 对 操作 员 动 作 的 请 求 等 ) ,以 及 所 有 输出 的 位 置 (如 磁带 号 码 ) ,测试 的 执行 是 否 
成 功 。 
环境 信息 。 记 录 该 条 目的 一 切 特殊 的 环境 条 件 。 
意外 事件 。 记 录 意 外 事件 及 其 发 生前 后 的 情况 ,例如 请 求 显 示 总 计 , 屏 幕 显示 正 
常 但 响应 时 间 似 乎 异常 地 长 ,重复 执行 时 响应 时 间 也 同样 过 长 。 记 录 无 法 开始 执 
行 测 试 或 无 法 结束 测试 的 周围 环境 ,例如 电源 故障 或 系统 软件 问题 。 
事件 报告 名 称 。 每 产生 一 个 测试 事件 报告 时 记录 其 名 称 。 
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7. 测试 事件 报告 
测试 事件 报告 共 4 章 ,结构 如 图 2-12 所 示 。 


下 面 给 出 每 一 章 的 详细 内 容 。 te 
(1) 测试 事件 报告 名 称 ( 该 报告 的 第 1 章 ) (2) 摘要 

为 该 测试 事件 报告 取 一 个 专用 名 称 。 (3) 事件 描述 

(2) 摘要 (第 2 章 ) CO 

简 述 事件 ,指出 有 关 测 试 项 及 其 版 本 /修订 级 别 。 引 图 2-12 测试 事件 报告 


用 有 关 的 测试 规程 说 明 ,测试 用 例 说 明和 测试 日 志 。 

(3) 事件 描述 (第 3 章 ) 

对 事件 进行 描述 。 该 描述 应 包括 : 

输入 、 预 期 结果 ,实际 结果 、 异 常 现象 ,日 期 和 时 间 、 规 程 步 又 、 环 境 、 重 复 执行 的 意图 、 
测试 者 和 观察 者 。 

该 描述 应 该 包括 有 助 于 确定 事件 发 生 的 原因 ,以 及 改正 其 中 错误 的 有 关 活 动 及 观察 。 
例如 ,描述 可 能 对 此 事件 有 影响 的 所 有 测试 用 例 的 执行 情况 ,描述 与 已 公布 的 测试 规程 之 
间 的 一 切 差 异 等 。 

(4) 影响 (第 4 章 ) 

在 所 知道 的 范围 内 指出 该 事件 对 测试 计划 ,测试 设计 说 明 ,测试 规程 说 明 或 测试 用 例 
说 明 所 产生 的 影响 。 


8. 测试 总 结 报告 
规定 该 报告 的 审批 者 (姓名 和 职务 ) ,并 为 签名 和 日 期 留 出 空间 。 


2.7 小 结 


本 章 阐 述 了 软件 测试 的 一 系列 基本 概念 .原则 ,介绍 了 软件 测试 文档 的 作用 、 分 类 及 
编写 规范 ,是 学 习 后 续 章节 的 基础 。 首 先 介绍 了 软件 测试 的 定义 、 对 象 及 著名 的 V&V， 
接着 从 不 同 角度 介绍 了 软件 测试 的 分 类 ,讨论 了 几 个 重要 的 软件 测试 过 程 模型 ,并 阐述 了 
测试 过 程 管理 的 若干 理念 ,以 及 测试 驱动 开发 的 思想 和 原则 ,指出 了 软件 测试 的 若干 原 
则 ,最 后 介绍 了 软件 测试 文档 的 作用 、 分 类 和 编写 规范 。 

在 测试 分 类 中 介绍 的 一 些 主要 测试 方法 和 技术 ,如 白 盒 测试 . 黑 盒 测试 ,性 能 测试 等 ， 
是 本 书 的 重要 内 容 , 将 在 后 续 章节 详细 介绍 。 


习 题 


1. 软件 测试 的 定义 是 什么 ? 它 与 以 前 理解 的 定义 有 何不 同 ? 

2. 软件 测试 的 对 象 仅仅 是 程序 吗 ? 谈 谈 你 的 观点 。 

3. V&V 中 两 个 V 的 含义 分 别 是 什么 ? 它们 属于 测试 吗 ? 两 者 有 何 区 别 ? 
4. 按 开发 阶段 ,软件 测试 可 分 为 哪 几 类 ? 


并 
主 


13, 
14. 
15. 
16. 
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.测试 和 B 测 试 的 含义 分 别 是 什么 ?两 者 有 何 区 别 和 联系 ? 


白 盒 测试 . 黑 盒 测 试 . 灰 盒 测试 三 者 有 何 区 别 ? 


. 什么 是 软件 测试 过 程 ? 
. 软件 测试 V 模型 有 何不 足 之 处 ? 
. 将 测试 活动 和 开发 活动 紧密 结合 是 哪 种 软件 测试 模型 所 倡导 的 ? 这 样 做 的 好 处 


. W 模型 有 何 局 限 性 ? 为 什么 ? 

. HH 模型 倡导 的 理念 是 什么 ? 它 为 何 能 弥补 W 模型 的 不 足 ? 

.HH 模型 是 否 有 利于 “全 过 程 测试 ”? 为 什么 ? 

测试 驱动 开发 的 含义 是 什么 ? 它 的 基本 步 又 是 怎样 的 ? 

你 认为 测试 驱动 开发 有 哪些 显著 的 优点 ? 为 什么 ? 

进行 软件 测试 时 应 把 握 的 原则 主要 有 哪些 ? 

软件 测试 文档 在 软件 测试 中 起 什么 样 的 作用 ? 其 主要 包括 哪 几 类 ? 


第 3 章 
黑 盒 测试 方法 
本 章 要 点 : 
。 测试 用 例 的 含义 。 


设计 测试 用 例 的 基本 准则 。 

。 黑 盒 测试 的 含义 。 

黑 盒 测试 无 法 实现 穷 举 测试 的 原因 。 
。 黑 盒 测试 的 优点 和 局 限 性 。 

。， 各 种 典型 的 黑 盒 测试 方法 。 

。 黑 盒 测试 方法 的 综合 使 用 策略 。 


在 这 一 章 , 将 介绍 测试 用 例 的 含义 和 设计 准则 , 黑 盒 测试 方法 的 概念 和 特点 ,以 及 典 
型 的 黑 盒 测试 方法 ,主要 包括 等 价 类 划分 法 .边界 值 分 析 法 .错误 推测 法 .因果 图 法 、 判 定 
表 法 . 正 交 试验 法 ,场景 法 ,功能 图 法 等 ,通过 对 其 实施 策略 和 具体 范例 的 介绍 ,使 读者 对 
这 些 方法 有 较 深 刻 的 理解 ,能够 在 今后 的 测试 实践 中 成 功 运 用 。 最 后 介绍 了 黑 盒 测试 方 
法 的 综合 使 用 策略 。 


3.1 测试 用 例 


1. 测试 用 例 的 概念 

测试 用 例 (Test Case) 是 为 特定 目标 开发 的 一 组 测试 输入 、 执 行 条 件 和 预期 结果 ,其 
目的 是 测试 程序 中 的 某 路 径 , 核 实 程序 或 软件 能 否 完成 某 个 特定 的 功能 需求 。 

程序 在 执行 某 测试 用 例 的 输入 数据 时 ,车 其 输出 结果 与 测试 用 例 中 的 预期 结果 不 同 ， 
则 说 明 程序 中 存在 缺陷 。 

完成 对 一 个 被 测 程序 的 测试 一 般 需 要 设计 并 执行 多 个 测试 用 例 。 

2. 测试 用 例 的 重要 性 

确定 测试 用 例 是 很 重要 的 ,原因 有 以 下 几 个 方面 : 

(1) 测试 用 例 构 成 了 设计 和 制定 测试 过 程 的 基础 。 

(2) 测试 的 “深度 "与 测试 用 例 的 数量 呈 比 例 。 由 于 每 个 测试 用 例 反 映 不 同 的 场景 、 
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条 件 或 经 由 产品 的 事件 流 , 因 而 随 着 测试 用 例 数 量 的 增加 ,开发 人 员 及 测试 人 员 对 产品 质 
量 和 测试 流程 也 就 越 有 信心 。 

(3) 判断 测试 是 否 完全 的 一 个 主要 评测 方法 是 基于 需求 的 覆盖 ,而 这 又 是 以 确定 、 实 
施 和 执行 的 测试 用 例 的 数量 为 依据 的 。 类 似 下 面 这 样 的 说 明 :“95% 的 关键 测试 用 例 已 
得 以 执行 和 验证 ”, 远 比 “ 已 完成 95% 的 测试 ?更 有 意义 。 

(4) 测试 工作 量 与 测试 用 例 的 数量 呈 比 例 。 根 据 全 面 且 细 化 的 测试 用 例 , 可 以 更 准 
确 地 估计 测试 周期 各 连续 阶段 的 时 间 安 排 。 

(5) 测试 设计 和 开发 的 类 型 及 所 需 的 资源 主要 都 受 控 于 测试 用 例 。 

3. 测试 用 例 的 设计 方法 概述 

由 于 穷 举 测试 是 不 可 能 的 , 故 测试 用 例 的 编写 是 一 项 富 于 技巧 性 和 挑战 性 的 工作 ,是 
软件 测试 中 的 重点 和 难点 。 测 试 人 员 应 从 数量 极 大 的 可 用 测试 用 例 中 精心 挑选 数量 有 限 
的 .具有 代表 性 或 特殊 性 的 测试 用 例 ,以 高 效 地 揭露 程序 或 软件 中 的 错误 。 

设计 测试 用 例 的 基本 准则 如 下 : 

(1) 测试 用 例 的 代表 性 。 设 计 测 试用 例 时 ,应 尽量 覆盖 各 种 合理 的 和 不 合理 的 ,合法 
的 和 非法 的 ,边界 的 和 越界 的 ,以 及 极限 的 输入 数据 、 操 作 和 环境 设置 ,设计 的 测试 用 例 应 
是 最 有 可 能 发 现 程序 或 软件 中 错误 的 。 

(2) 测试 用 例 的 非 重 复 性 。 测 试用 例 不 应 是 与 原 有 测试 用 例 重 复 的 ,应 追求 测试 用 
例 数目 的 精简 。 

(3) 测试 结果 的 可 判定 性 。 测 试 执行 结果 的 正确 性 是 可 判定 的 ,每 一 个 测试 用 例 都 
应 有 相应 的 预期 结果 。 

(4) 测试 结果 的 可 再 现 性 。 对 同样 的 测试 用 例 ,被 测 程序 的 执行 结果 应 当 是 相同 的 。 

一 般 来 说 ,测试 用 例 设 计 属 于 重复 次 数 少 的 智能 活动 ,不 太 适 合 于 自动 化 。 但 也 有 一 
些 场合 可 以 进行 一 定 程度 的 自动 化 以 提高 设计 效率 ,实现 这 种 目的 的 工具 被 称 为 测试 输 
入 生成 工具 。 测 试 输入 生成 工具 可 产生 大 量 的 测试 用 例 ,但 它 不 能 区 分 哪些 用 例 是 最 重 
要 的 ,这 项 任务 只 能 由 测试 人 员 完 成 。 

工具 生成 测试 用 例 依赖 于 规格 描述 的 形式 化 ,如 果 不 能 做 到 形式 化 描述 ,是 无 法 按照 
一 定 算法 实现 用 例 设计 自动 化 的 。 另 外 由 于 用 例 的 生成 依赖 于 所 采用 的 算法 ,所 以 工具 
生成 用 例 比 人 工 设计 更 彻底 、 精 确 。 但 人 工 设 计 测 试用 例 在 判断 用 例 覆 盖 功 能 点 是 否 有 
遗漏 方面 更 具有 优势 。 

测试 用 例 的 设计 方法 主要 分 为 白 盒 法 、. 黑 盒 法 和 灰 盒 法 。 


3.2 黑 盒 测试 方法 概述 


3.2.1 黑 盒 测试 的 概念 和 对 象 


1. 黑 盒 测试 的 概念 

黑 盒 测试 又 称 为 数据 驱动 测试 或 基于 规格 说 明 的 测试 。“ 黑 盒 ” 可 理解 为 程序 或 软件 
装 在 一 个 漆黑 的 盒子 里 ,所 以 盒子 内 的 程序 对 测试 人 员 来 说 是 不 可 见 的 。 

执行 黑 盒 测试 的 人 员 在 完全 不 考虑 程序 或 软件 的 内 部 逻辑 结构 和 处 理 过 程 的 情况 


a 
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下 ,根据 软件 的 需求 规格 说 明 书 设计 测试 用 例 ,在 程序 或 软件 的 界面 上 进行 测试 。 故 黑 盒 
测试 是 从 用 户 角度 出 发 进行 的 测试 。 
用 黑 盒 方法 设计 测试 图 例如 图 3-1 所 示 ,每 个 测试 用 例 包 括 输 入 数据 和 预 输出 数据 ， 


在 执行 测试 用 例 时 ,将 实际 输出 数据 与 预 输出 数据 本 
进行 比较 ,两 者 车 不 同 , 则 说 明 程序 很 可 能 存在 ”输入 数据 EE 
缺陷 。 

黑 盒 测 试 的 目的 主要 是 为 了 发 现 以 下 错误 ， 图 3-1 黑 鲍 测试 用 例 设计 思路 


(1) 是 否 有 不 正确 或 遗漏 了 的 功能 。 

(2) 在 接口 上 输入 能 否 正确 地 接受 。 能 否 输出 正确 的 结果 。 

(3) 是 否 有 数据 结构 错误 或 外 部 信息 (例如 数据 文件 ) 访 问 错误 。 

(4) 性 能 上 是 否 能 够 满足 要 求 。 

(5) 是 否 有 初始 化 或 终止 性 错误 。 

很 多 人 将 黑 盒 测试 称 为 功能 测试 ,实际 上 ,进行 功能 测试 是 黑 盒 测试 的 主要 任务 ,但 
并 不 是 其 全 部 , 黑 盒 测试 还 包括 性 能 测试 等 。 

黑 盒 方法 不 可 能 实现 穷 举 测试 ,主要 原因 如 下 : 

(1) 在 测试 某 功能 时 不 可 能 对 其 所 有 输入 值 进行 测试 ,更 不 可 能 对 其 所 有 输入 取 值 
组 合 进行 测试 。 

(2) 无 法 对 需求 规格 说 明 书 中 未 规定 的 潜在 需求 进行 测试 。 

2. 黑 盒 测 试 的 对 象 

在 一 个 软件 的 开发 过 程 中 ,其 需要 测试 的 功能 分 为 不 同 的 层次 ,单个 程序 模块 有 其 规 
定 的 功能 ,而 多 个 程序 模块 集成 后 作为 一 个 整体 亦 有 其 规定 的 功能 需求 ,而 且 模 块 的 集成 
一 般 是 一 个 持续 的 过 程 ,会 经 过 若干 临时 版 本 ,直至 形成 最 终 软件 系统 。 所 以 黑 盒 测试 的 
对 象 既 可 以 是 单个 程序 ,也 可 以 是 模块 集成 过 程 中 的 多 个 临时 版 本 和 最 终 软件 。 为 简单 
起 见 , 在 下 文中 多 处 将 黑 盒 测试 方法 的 对 象 说 成 是 “程序 ”。 
3.2.2 ” 黑 盒 测试 的 优点 和 局 限 性 


1. 黑 盒 测试 的 优点 

正 由 于 黑 盒 测试 是 在 程序 或 软件 界面 上 进行 的 测试 , 故 其 具有 两 个 优点 : 

(1) 黑 盒 测 试 不 考虑 程序 或 软件 的 具体 实现 , 若 程序 或 软件 的 内 部 实现 发 生 了 变化 ， 
原先 的 测试 用 例 依然 可 用 ， 

(2) 黑 盒 测试 用 例 的 设计 可 以 与 软件 的 实现 同时 进行 ,因而 加 快 了 软件 测试 与 开发 
的 速度 。 

2. 黑 盒 测试 的 局 限 性 

但 黑 盒 测试 也 存在 一 些 局 限 性 。 

(1) 黑 盒 测试 是 从 程序 的 界面 上 进行 的 测试 , 故 有 时 难以 查找 出 错误 的 具体 原因 和 
位 置 ,还 需要 通过 执行 白 盒 测试 来 进行 更 细致 的 错误 定位 。 

(2) 黑 盒 测试 的 唯一 依据 是 软件 的 需求 规格 说 明 书 , 它 无 法 发 现 需求 规格 说 明 本 身 
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存在 的 问题 。 例 如 ,由 于 考虑 不 周 或 需求 规格 说 明 书 中 陈述 的 需求 缺乏 清晰 的 层次 ,导致 
需求 规格 说 明 书 未 能 全 面 ,准确 地 表达 用 户 的 需求 ,都 会 使 黑 盒 测试 的 有 效 性 大 打折 扣 。 


3.3 ”典型 的 黑 盒 测试 方法 


典型 的 黑 盒 测试 方法 包括 等 价 类 划分 法 .边界 值 分 析 法 .错误 推测 法 、 因 果 图 法 .判定 
表 法 . 正 交 试 验 法 ,场景 法 .功能 图 法 等 ,下 面 对 这 些 方法 分 别 加 以 介绍 。 


3.3.1 等 价 类 划分 法 


1. 等 价 类 划分 法 的 实施 策略 

等 价 类 划分 法 是 一 种 典型 的 黑 盒 测试 用 例 设计 方法 。 采 用 等 价 类 划分 法 时 ,完全 不 
考虑 程序 的 内 部 结构 ,设计 测试 用 例 的 唯一 依据 是 软件 需求 规格 说 明 书 。 

所 谓 等 价 类 ,是 被 测 程序 输入 域 的 一 个 子 集合 ,该 输入 集合 中 的 数据 对 于 揭示 程序 中 
的 错误 是 等 价 的 。 故 对 某 等 价 类 中 的 代表 值 的 测试 就 相当 于 对 等 价 类 中 所 有 值 的 测试 ， 
这 大 大 减少 了 测试 用 例 的 数目 ,提高 了 测试 的 效率 。 

使 用 等 价 类 划分 法 时 ,应 仔细 分 析 需 求 规格 说 明 书 ,将 被 测 程序 的 输入 域 划分 为 若干 
等 价 类 。 等 价 类 又 分 为 有 效 等 价 类 和 无 效 等 价 类 。 

所 谓 有 效 等 价 类 ,是 指 该 等 价 类 中 的 输入 数据 是 符合 需求 规格 说 明 的 ;而 无 效 等 价 类 
是 指 该 等 价 类 中 的 数据 是 违反 需求 规格 说 明 的 。 若 使 用 强 类 型 语言 编程 ,无 效 输入 会 导 
致 运行 时 出 错 , 因 此 不 需 考虑 无 效 等 价 类 。 

有 效 等 价 类 和 无 效 等 价 类 都 是 使 用 等 价 类 划分 法 设计 测试 用 例 时 所 必须 的 ,因为 被 
测 程序 若是 正确 的 ,就 应 既 能 接受 有 效 输入 数据 ,也 能 接受 无 效 输入 数据 的 考验 。 

划分 等 价 类 的 若干 原则 如 下 : 

(1) 在 规定 了 输入 数据 的 取 值 范围 的 情况 下 ,可 以 确定 一 个 有 效 等 价 类 和 两 个 无 效 
等 价 类 。 如 月 份 取 值 应 在 1 一 12 之 间 , 可 由 此 确定 一 个 有 效 等 价 类 即 月 份 取 值 在 1 一 12 
之 间 , 和 两 个 无 效 等 价 类 , 即 月 份 取 值 小 于 1 及 月 份 取 值 大 于 12。 

(2) 在 规定 了 输入 条 件 必须 如 何 的 情况 下 ,可 以 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 
价 类 。 如 输入 值 必 须 大 于 0, 则 有 效 等 价 类 为 输入 值 必须 大 于 0, 无 效 等 价 类 为 输入 值 小 
于 或 等 于 0。 

(3) 在 输入 数据 是 一 个 布尔 量 的 情况 下 ,可 以 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 
价 类 。 

(4) 在 规定 了 输入 数据 由 个 值 构 成 .并 要 求 对 其 中 的 每 个 值 进 行 测试 时 ,可 以 确定 
nn 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

(5) 在 规定 了 输入 数据 必须 遵守 的 规则 的 情况 下 ,可 以 确定 一 个 有 效 等 价 类 和 若干 
个 无 效 等 价 类 (从 不 同 角度 违反 规则 )。 如 规定 输入 值 必 须 是 数字 类 型 的 字符 , 则 可 确定 
一 个 有 效 等 价 类 , 即 输入 值 为 数字 类 型 的 字符 ,和 多 个 无 效 等 价 类 , 即 输 入 值 为 字母 ,为 专 
用 字符 (如 十 、* 、/ 等 ) 及 为 非 打 印字 符 ( 如 回 车 、 空 格 等 )。 

(6) 在 已 划分 的 某 等 价 类 中 , 若 各 元 素 在 程序 中 的 处 理 方式 不 同 , 则 应 将 此 等 价 类 进 


人 
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一 步 划分 为 若干 等 价 类 。 
划分 等 价 类 的 过 程 是 一 个 对 软件 的 需求 规格 说 明 进行 分 析 推 项 的 过 程 ,有 时 还 需要 
多 次 的 尝试 方 能 成 功 。 
对 被 测 程序 划分 出 若干 有 效 等 价 类 和 无 效 等 价 类 之 后 ,应 建立 等 价 类 表 , 列 出 与 每 一 
输入 条 件 对 应 的 有 效 等 价 类 和 无 效 等 价 类 ,格式 如 表 3-1 所 示 。 
表 3-1 等 价 类 表格 式 
有 效 等 价 类 


输入 条 件 无 效 等 价 类 


接着 根据 等 价 类 表 编 写 测试 用 例 ,可 遵循 如 下 步骤 : 

@ 为 每 一 等 价 类 规定 一 个 唯一 的 编号 。 

@ 设计 一 个 测试 用 例 , 使 其 尽 可 能 多 地 覆盖 尚未 被 覆盖 的 有 效 等 价 类 。 如 此 重复 ， 
直至 所 有 有 效 等 价 类 均 被 测试 用 例 所 履 盖 。 

@ 设计 一 个 测试 用 例 ,使 其 覆盖 一 个 尚未 被 覆盖 的 无 效 等 价 类 。 如 此 重复 ,直至 所 
有 无 效 等 价 类 均 被 测试 用 例 所 覆盖 。 

2. 等 价 类 划分 法 举例 

下 面 给 出 一 个 运用 等 价 类 划分 法 进行 黑 盒 测 试 的 例子 。 

试 根据 如 下 的 规格 说 明 , 采 用 等 价 类 划分 方法 给 出 足够 多 的 测试 用 例 。" 一 个 程序 读 
入 3 个 整数 ,把 这 3 个 整数 的 值 看 作 一 个 三 角形 的 3 条 边 的 长 度 , 根 据 3 条 边 长 确定 该 三 
角形 是 普通 的 、 等 腰 的 还 是 等 边 的 ,并 打印 出 结论 ”。 

可 设 三 角形 的 3 条 边 长 分 别 为 A.B,C。 若 此 3 条 边 能 构成 一 个 普通 三 角形 ,必须 
满足 


A>0, B>0, C>0, A+B>C, B+C>A, A+C>B 
若 此 3 条 边 能 构成 一 个 等 腰 三 角形 ,必须 进一步 满足 
A=B， 或 A=C， 或 B=C 
若 此 3 条 边 能 构成 一 个 等 边 三 角形 ,必须 在 满足 为 普通 三 角形 的 基础 上 进一步 满足 
A=B， 且 B=C， 且 4A=C 


通过 对 程序 功能 的 分 析 , 列 出 等 价 类 表 如 表 3-2 所 示 。 
表 3-2 判断 三 角形 类 型 程序 的 等 价 类 表 


输入 条 件 有 效 等 价 类 无 效 等 价 类 
A>0 (1) A=0 (7) 
B>0 (2) B=0 (8) 
. C>0 (3) C=0 (9) 
1 不 为 瘟 涌 二 区 
是 否 为 普通 三 角形 A+B>C (4) A+B=C (10) 
B+C>A (5) B+C=A C11y 
A+C>B (6) A+C=B (12) 
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续 表 
输入 条 件 有 效 等 价 类 无 效 等 价 类 

A=B (13) 

是 否 为 等 腰 三 角形 B=C (14) AAB and B#C and C#A (16) 
丰 三 此 (15) 

本 加 AzB (18) 

是 否 为 等 边 三 角形 “| Cm | Bzc (19) 

CA (20) 


接 下 来 设计 测试 用 例 , 设 输入 数据 为 LA,B,Cj, 测 试用 例如 表 3-3 所 示 。 
表 3-3 判断 三 角形 类 型 程序 的 基于 等 价 类 方法 的 测试 用 例 


序号 | 输入 数据 覆盖 的 等 价 类 预期 输出 

1 3,4,5] | (1),(2),(3),(4),(5),(6) 为 普通 三 角形 

2 [0,1,2] | (7) 

3 1,0,2] | (8) 

4 L230 | .C9 

不 为 三 角形 

5 ks253] | CTO 

6 3 到 | Kil 

- La | Ca 

8 3,3,4] | (1),(2),(3),(4),(5),(6),(13) 

9 3,4,4] | (1),(2),(3),(4),(5),(6),(14) 为 等 腰 三 角形 

10 | [348] | 《56027637 C4) (C5).C6)5 C15) 

1 | [3,4,5] | C1),C2) .C34) ,05) (C6),C16) 为 非 等 腰 三 角形 (为 普通 三 角形 ) 
12 S03 | DG 入 天王 为 等 边 三 角形 

13 | [3,4,4] | (1),(2),(3),(4),(5),(6),(14)，(18) 

14 | [354,3] | C1D5C2)5(3) 5 04), (5),C6)5C15),(19) 为 非 等 边 三 角形 (为 等 腰 三 角形 ) 
15 | [3,3,4] | (1),(2),(3),(4),(5),(6),(13),(20) 


通过 对 表 3-3 的 仔细 分 析 ,还 可 对 表 3-3 中 的 测试 用 例 进行 如 下 简化 : 

。 第 11 号 测试 用 例 与 第 1 号 测试 用 例 重 复 , 可 以 略 去 ,类 似 地 ,第 8 号 和 第 15 号 测 
试用 例 .第 9 号 和 第 13 号 测试 用 例 、 第 10 号 和 第 14 号 测试 用 例 也 是 分 别 相同 
的 , 故 第 13,14,15 号 测试 用 例 也 可 略 去 。 

。 若 不 考虑 A,B,C 的 特定 取 值 ,第 2,3,4 号 测试 用 例 中 选 一 个 即 可 ,类 似 地 ,第 5， 
6,7 号 测试 用 例 中 选 一 个 即 可 ,第 8,9,10 号 测试 用 例 中 选 一 个 即 可 。 

在 对 该 判断 三 角形 类 型 的 程序 执行 表 3-3 中 的 测试 用 例 过 程 中 , 若 执行 某 测试 用 例 
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中 的 输入 数据 ,得 到 的 输出 结果 与 测试 用 例 中 的 预期 输出 (注意 : 完整 的 测试 用 例 应 包括 
预期 输出 ) 不 同 ,如 执行 输入 数据 为 [3,3,3j 的 测试 用 例 , 得 到 的 输出 为 等 腰 三 角形 , 则 说 
明 该 程序 中 存在 错误 ,需要 进一步 查找 错误 的 原因 和 位 置 并 进行 修复 。 

3.3.2 边界 值 分 析 法 

大 量 测试 实践 表明 ,很 多 错误 是 发 生 在 输入 或 输出 数据 范围 的 边界 上 。 因 而 针对 各 
种 边界 情况 设计 测试 用 例 , 有 利于 揭露 程序 中 的 错误 。 

如 3. 3.1 小 节 中 的 判断 三 角形 类 型 的 例题 中 , 若 此 3 条 边 能 构成 一 个 普通 的 三 角形 ， 
必须 满足 A>0,B>0,C>0,A 十 B>C,B 十 C>A4A,A 十 C>B; 对 于 等 价 类 A 之 0, 其 边界 是 
A 二 0, 可 针对 此 边界 设计 测试 用 例 ,以 验证 程序 在 A=0 时 的 输出 是 否 正 确 ; 若 A==0 时 
程序 的 输出 仍 为 普通 三 角形 , 则 说 明 程 序 中 存在 错误 。 

边界 值 分 析 法 是 一 种 对 等 价 类 划分 法 的 补充 。 使 用 边界 值 分 析 法 时 ,应 针对 等 于 、 刚 
好 大 于 或 刚好 小 于 各 输入 等 价 类 和 输出 等 价 类 (此 处 对 3. 3. 1 小 节 中 等 价 类 的 概念 进行 
了 扩展 ,但 并 不 影响 对 实际 问题 的 理解 ) 边 界 值 的 情况 设计 测试 用 例 。 

用 边界 值 分 析 法 设计 测试 用 例 , 应 遵循 如 下 原则 : 

(1) 若 输入 条 件 规定 了 值 的 范围 ,应 针对 刚 达到 此 范围 边界 的 值 ,以 及 刚 超越 此 范围 
边界 的 值 设 计 测 试用 例 。 

(2) 若 输入 条 件 规定 了 值 的 个 数 , 针 对 最 大 个 数 .最 小 个 数 . 比 最 大 个 数 大 1、 比 最 小 
个 数 小 1 等 几 种 情况 的 数据 设计 测试 用 例 。 

(3) 若 输出 条 件 规定 了 值 的 范围 ,应 针对 刚 达到 此 范围 边界 的 值 , 以 及 刚 超 越 此 范围 
边界 的 值 设 计 测 试用 例 。 

(4) 车 输出 条 件 规定 了 值 的 个 数 , 针 对 最 大 个 数 、 最 小 个 数 、 比 最 大 个 数 大 1、 比 最 小 
个 数 小 1 等 几 种 情况 的 数据 设计 测试 用 例 。 

(5) 车 程序 的 规格 说 明 中 给 出 的 输入 域 或 输出 域 是 有 序 集合 ,应 针对 集合 的 第 一 个 
元 素 ( 即 刚好 大 于 或 小 于 第 一 个 元 素 值 的 数值 ) 和 最 后 一 个 元 素 ( 即 刚好 大 于 或 小 于 最 后 
一 个 元 素 值 的 数值 ) 设 计 测 试用 例 。 

(6) 若 程序 中 使 用 了 内 部 数据 结构 ,应 针对 该 内 部 数据 结构 边界 上 的 值 设 计 测试 
用 例 。 

(7) 进一步 分 析 规 格 说 明 , 找 出 其 他 可 能 的 边界 情况 ,针对 它们 设计 测试 用 例 。 

当然 ,运用 以 上 原则 时 不 能 生 搬 硬 套 ,最 重要 的 是 在 分 析 具 体 规格 说 明 的 基础 上 寻找 
边界 情况 ,进而 设计 测试 用 例 。 

关于 边界 值 分 析 法 的 实例 将 在 3. 3. 3 小 节 中 一 并 介绍 。 

3.3.3 错误 推测 法 


1. 错误 推测 法 的 实施 策略 

所 谓 错误 推测 法 (Error Guessing) ,是 根据 测试 人 员 的 经 验 和 直觉 推测 程序 中 可 能 
存在 的 错误 ,有 针对 性 地 设计 测试 用 例 ,可 以 验证 事先 的 推测 是 否 正确 。 

错误 推测 法 一 般 是 针对 程序 的 敏感 点 设计 测试 用 例 。 例 如 ,人 们 总 结 了 在 单元 测试 
时 模块 中 容易 发 生 的 一 些 错误 ,可 根据 此 经 验 设 计 测 试用 例 ; 又 如 输入 数据 为 空 ,或 输入 
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表格 为 空 , 凭 经 验 来 看 是 程序 不 一 定 能 正确 处 理 的 情况 ,可 针对 这 些 情况 设计 测试 用 例 ; 
若 程序 要 求 输入 正 数 ,可 输入 负数 观察 程序 能 和 否 正确 处 理 该 情况 ; 若 程序 对 输入 时 间 敏 
感 ,可 将 公元 4000 年 作为 输入 数据 ,观察 程序 如 何 处 理 。 


2. 边界 值 分 析 法 和 错误 推测 法 举例 

下 面 考查 一 个 综合 使 用 边界 值 分 析 法 和 错误 推测 法 进行 黑 盒 测试 的 范例 。 

有 一 个 标准 化 考试 阅卷 程序 ,能 批阅 考生 试卷 并 生成 统计 报告 ,其 规格 说 明 如 下 。 

标准 化 考试 阅卷 程序 的 输入 由 若干 记录 组 成 ,每 个 记录 均 含有 80 个 字符 ;记录 根据 
类 型 可 分 为 3 组 ,分 别 为 标题 记录 标准 答案 记录 和 学 生 答卷 记录 ,如 图 3-2 所 示 。 


标题 记录 
标 题 
和 80 
标准 答案 记录 
试题 数 标准 答案 (第 1 一 50 题 ) 2 
1 10 59 80 
试题 数 标准 答案 (第 51 一 100 题 ) 2 
1 3 10 59 80 
学 生 答卷 记录 
学 号 1 学 生 答案 (第 1 一 50 题 ) 3 
1 9 10 59 80 
学 号 1 学 生 答案 (第 51 一 100 题 ) 本 
1 9 10 59 80 
学 号 并 学 生 答 案 ( 第 1 一 50 题 ) 3 
i 9 10 59 80 
学 号 n 学 生 答案 (第 51 一 100 题 ) 3 
1 9 10 59 80 


图 3-2 标准 化 考试 阅卷 程序 输入 数据 形式 

标题 记录 只 有 一 个 ,记录 内 容 为 统计 报告 的 名 字 。 

标准 答案 记录 有 若干 个 ,其 数目 取决 于 试题 数 。 标 准 答 案 记 录 的 第 80 个 字符 均 为 
“2”; 每 个 记录 的 第 1 一 3 个 字符 表示 试题 数 ; 第 10 一 59 个 字符 为 标准 答案 ,其 中 每 个 字符 
对 应 于 一 道 试题 的 答案 (标准 答案 记录 中 的 第 1 个 记录 的 第 10 一 59 个 字符 为 第 1 一 50 题 
的 答案 ,第 2 个 记录 的 第 10 一 59 个 字符 为 第 51 一 100 题 的 答案 ,以 此 类 推 )。 

学 生 答卷 记录 也 有 若干 个 ,其 数目 取决 于 学 生 人 数 和 试题 数 。 学 生 答卷 记录 的 第 80 个 字 
符 均 为 “3”; 每 个 记录 的 第 1 一 9 个 字符 表示 学 号 ;第 10 一 59 个 字符 为 学 生 的 答案 ,其 中 每 个 字 
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符 对 应 于 一 道 试题 的 学 生 答案 (学 生 答 卷 记录 中 的 第 1 个 记录 的 第 10 一 59 个 字符 为 
第 1 一 50 题 的 答案 ,第 2 个 记录 的 第 10 一 59 个 字符 为 第 51 一 100 题 的 答案 ,以 此 类 推 ) 。 

此 外 ,规定 学 生 数 不 大 于 200 ,试题 数 不 大 于 999 。 

程序 输出 的 统计 报告 有 如 下 4 种 : 

(1) 按 学 号 排列 的 成 绩 单 。 按 学 号 顺序 列 出 每 个 学 生 的 名 次 和 成 绩 。 

(2) 按 学 生成 绩 排列 的 成 绩 单 ,其 中 成 绩 相 同 者 名 次 相同 。 

(3) 平均 分 和 标准 偏差 报告 。 

(4) 试题 分 析 报告 。 按 试题 号 顺序 列 出 每 题 学 生 回 答 正 确 的 百分比 。 

下 面 首先 采用 边界 值 分 析 法 设计 测试 用 例 , 分 别针 对 输入 条 件 和 输出 条 件 的 边界 进 
行 设计 。 针 对 输入 条 件 边界 可 以 设计 若干 测试 用 例 ,如 表 3-4 所 示 。 


表 3-4 阅卷 程序 针对 输入 条 件 边界 设计 的 测试 用 例 


测试 用 例 序号 输入 条 件 测试 用 例 
1 输入 文件 输入 文件 为 空 
没有 标题 记录 
2 一 4 标题 标题 仅 有 一 个 字符 
标题 有 80 个 字符 
试题 数 为 1 
试题 数 为 50 
5 一 9 试题 数 试题 数 为 51 
试题 数 为 100 
试题 数 为 0 
本 没有 标准 答案 记录 ,有 标题 记录 
10~12 i 标准 答案 记录 多 1 个 
ES 标准 答案 记录 少 1 个 
学 生 人 数 为 0 
学 生 人 数 为 1 
13 一 16 学 生 人 数 学 生 人 数 为 200 
学 生 人 数 为 201 
17 学 生 答卷 某 学 生 答卷 记录 条 数 少 于 标准 答案 记录 条 数 
某 学 生 学 号 为 最 小 
某 学 生 学 号 为 最 大 
所 有 学 生成 绩 相等 
学 生成 绩 均 不 相同 


某 一 个 学 生成 绩 为 0 分 
某 一 个 学 生成 绩 为 100 分 


然后 ,针对 输出 条 件 ( 即 输出 的 4 个 统计 报告 ) 边 界 设计 若干 测试 用 例 ,如 表 3-5 
所 示 。 


第 3 章 黑金 测试 方法 


表 3-5 阅卷 程序 针对 输出 条 件 边 界 设计 的 测试 用 例 
测试 用 例 序 号 | 输出 条 件 测试 用 例 
适当 的 学 生 人 数 .使 统计 报告 刚好 打印 满 1 页 
24~~25 | 第 1.2 种 报告 | 学 生 人 数 比 刚才 多 1 
所 有 学 生成 绩 均 为 100 分 
所 有 学 生成 绩 均 为 0 分 
36 一 28 | 第 3 种 报告 | 一 半 学 生 的 成 绩 为 100 分 ,一 半 学 生 的 成 绩 为 0 分 (标准 偏差 
最 大 ) 
所 有 学 生 均 答对 第 1 是 
所 有 学 生 均 答 错 第 1 是 
| 第 4 种 报告 。 | 所 有 学 生 均 答对 最 后 一 是 


所 有 学 生 均 答 错 最 后 一 题 
适当 的 试题 数 ,使 统计 报告 刚好 打印 满 1 页 
试题 数 比 刚才 多 1 


通过 执行 表 3-4 和 表 3-5 中 各 测试 用 例 , 可 以 发 现 该 阅卷 程序 的 大 多 数 错误 。 
最 后 ,进一步 分 析 程 序 的 规格 说 明 ,用 错误 推测 法 补充 一 些 设计 用 例 , 如 表 3-6 所 示 。 
表 3-6 阅卷 程序 采用 错误 推测 法 补充 的 测试 用 例 


测试 用 例 序 号 测试 用 例 
各 学 生 答 卷 记录 的 答案 部 分 (第 10 一 59 个 字符 ) 含 空格 (不 考虑 每 一 学 生 的 最 后 一 条 
答卷 记录 ) 
36 除 标题 记录 外 , 某 些 记录 的 第 80 个 字符 既 不 是 “2? 也 不 是 “3” 
37 有 两 个 学 生 的 学 号 相同 
38 某 学 号 中 含有 非 数字 字符 
39 某 学 生 的 成 绩 是 负 值 
40 部 分 学 生成 绩 相同 
41 试题 数 是 负 值 


3.3.4 因果 图 法 


1. 因果 图 法 的 实施 策略 


前 面 介 绍 的 等 价 类 划分 法 .边界 值 分 析 法 及 错误 推测 法 在 ,对 输入 条 件 的 考虑 中 并 未 
重视 输入 条 件 的 组 合 。 事 实 上 , 当 输入 存在 若干 种 可 能 的 组 合 时 ,必须 对 这 些 组 合 加 以 考 
虑 ,以 证 实测 试 程序 在 某 种 输入 组 合 的 情况 下 能 否 完 成 规格 说 明 书 中 预先 规定 的 功能 , 否 
则 所 做 的 测试 是 不 充分 的 。 

因果 图 (Cause-effect Graph) 是 一 种 描述 输入 条 件 的 组 合 及 每 种 组 合 对 应 的 输出 的 
图 形 化 工具 。 在 因果 图 的 基础 上 可 以 设计 测试 用 例 。 

利用 因果 图 设计 测试 用 例 应 遵循 如 下 步 又: 

O@ 分 析 程 序 的 规格 说 明 中 哪些 是 原因 ,哪些 是 结果 。 所 谓 原因 ,是 指 输 入 条 件 或 输 
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入 条 件 的 等 价 类 ,而 结果 是 指 输出 条 件 。 给 每 个 原因 和 结果 赋 一 个 标识 符 。 

@ 分 析 程序 的 规格 说 明 中 的 语义 ,确定 原因 与 原因 、 原 因 与 结果 之 间 的 关系 , 画 出 因 
果 图 。 

@ 由 于 语法 或 环境 的 限制 ,一 些 原因 与 原因 之 间 、 原 因 与 结果 之 间 的 组 合 不 能 出 现 。 
对 于 这 些 特 殊 情 况 ,在 因果 图 中 用 一 些 记 号 标明 约束 或 限制 条 件 。 

@ 将 因果 图 转化 为 判定 表 。 

@ 根据 判定 表 的 每 一 列 设计 测试 用 例 。 

当然 , 若 能 直接 得 到 判定 表 , 可 直接 根据 判定 表 设 计 测试 用 例 。 


2. 因果 图 的 画 法 
在 因果 图 中 ,通常 用 C; 表示 原因 ,用 E; 表示 结果 ,其 基本 符号 如 图 3-3 所 示 。 


在 因果 图 中 ,各 结 点 的 取 值 可 为 0 或 1,0 表 co op CO ww op 
示 该 结 点 所 代表 的 状态 不 出 现 ,1 表示 该 结 点 代 (a) 便 等 (b) 非 
表 的 状态 出 现 。 对 图 3-3 中 的 4 种 关系 解释 CI a 
Vv El OE 
如 下 : > ce 
(1) 恒 等 。 若 原因 出 现 , 则 结果 出 现 ; 若 原因 (ec) 或 (d) 与 
不 出 现 , 则 结果 不 出 现 。 图 3-3 因果 图 的 基本 图 形 符号 


(2) 非 。 若 原因 出 现 , 则 结果 不 出 现 ; 若 原因 
不 出 现 , 则 结果 出 现 。 

(3) 或 。 若 几 个 原因 中 有 一 个 出 现 , 则 结果 出 现 ; 若 几 个 原因 均 不 出 现 ,结果 才 不 
出 现 。 

(4) 与 。 若 几 个 原因 中 都 出 现 ,结果 才 出 现 ; 若 几 个 原因 中 有 一 个 不 出 现 , 则 结果 不 
出 现 。 

为 了 表示 因果 图 中 的 约束 条 件 ,可 用 一 些 符 号 在 因果 图 中 加 以 标识 。 从 原因 方面 考 
虑 ,主要 有 4 种 约束 条 件 , 如 图 3-4(a) 一 (d) 所 示 ; 从 结果 方面 考虑 ,主要 有 1 种 约束 条 件 ， 
如 图 3-4(e) 所 示 。 


/Da Oa Oa /Da aO、 
/ / / / 所 
时 4 / / \ 
/ 六 * J 
Es It---Ob 0O¢ R >M 
AN 入 和 \ / 
2 \ i ~. 
和 \ 六 AN 有 
‘Ob ‘Ob ‘Ob ‘Ob bOY/ 
(a) E( 互 斥 ， 排 他 ) (b) I( 包 含 , 或 ) (©) O( 唯 一 ) (d) R( 要 求 ) (e) M( 屏 项 ) 


图 3-4 因果 图 中 的 约束 符号 


图 3-4 中 的 5 种 约束 符号 的 含义 分 别 如 下 : 

(1) E( 互 斥 ) 。a'b 两 个 原因 不 会 同时 出 现 , 最 多 只 有 一 个 出 现 。 
(2) I( 包 含 )。a,b,c 3 个 原因 中 至 少 有 一 个 原因 出 现 。 

(3) O( 唯 一 )。a,b 两 个 原因 中 必须 有 一 个 出 现 , 且 仅 有 一 个 出 现 。 
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(4) R( 要 求 )。a 出 现时 b 也 必定 出 现 。 
(5) M( 屏 项 )。a 出 现时 ,b 必定 不 出 现 ;a 不 出 现时 ,b 则 不 确定 。 


3. 因果 图 法 举例 

下 面 给 出 一 个 使 用 因果 图 法 进行 黑 盒 测试 的 范例 。 

有 一 个 处 理 单价 为 5 角 钱 饮料 的 自动 售 货 机 软件 ,对 其 采用 因果 图 方法 设计 测试 用 
例 。 该 自动 售 货 机 软件 规格 说 明 中 的 要 点 如 下 : 

@ 若 售 货 机 没有 零钱 找 , 则 一 个 显示 “零钱 找 完 ”的 红 灯 亮 ,以 提示 顾客 在 此 情况 下 
不 要 投入 1 元 钱 ,否则 此 红 灯 不 亮 。 

@ 顾客 投入 5 角 硬 币 后 , 按 下 “橙汁 "或 “啤酒 ”按钮 , 则 相应 的 饮料 被 送出 。 

@ 顾客 投入 1 元 硬币 并 按 “ 橙 汁 "或 “啤酒 ”按钮 后 ,车 售 货 机 没有 零钱 找 , 则 显示 “ 零 
钱 找 完 ”的 红 灯 亮 ,1 元 硬币 被 退出 , 且 无 饮料 送出 ; 若 有 零钱 找 , 则 5 角 硬 币 被 退出 且 饮 
料 被 送出 。 

(1) 首先 在 分 析 规格 说 明 的 基础 上 列 出 原因 和 结果 。 

原因 有 5 种 ,如 表 3-7 所 示 。 

结果 有 5 种 ,如 表 3-8 所 示 。 

表 3-7 自动 售 货 机 软件 规格 说 明 中 的 原因 


编号 原 编号 原 
1 售 货 机 有 零钱 找 4 按 * 橙 汁 "按钮 
2 投入 1 元 硬币 5 按 “ 啤 酒 "按钮 
3 投入 5 角 硬 币 


表 3-8 自动 售 货 机 软件 规格 说 明 中 的 结果 


21 售 货 机 “零钱 找 完 ” 灯 亮 24 送出 橙汁 饮料 
22 退还 1 元 硬币 25 送出 啤酒 饮料 
2 退还 5 角 硬币 


(2) 通过 对 规格 说 明 的 进一步 分 析 , 在 原因 与 结果 之 间 再 建立 4 个 中 间 结 点 ,如 
表 3-9 所 示 。 
表 3-9 4 个 中 间 结 点 


序 号 中 间 结 点 序 号 中 间 结 点 
11 投入 1 元 硬币 且 按 饮料 按钮 13 退还 5 角 零 钱 且 售 货机 有 零钱 找 
12 按 * 橙 汁 ? 或 “啤酒 ?按钮 14 钱 已 付 清 


(3) 根据 列 出 的 原因 、 结 果 和 中 间 结 点 画 出 因果 图 ,如 图 3-5 所 示 。 


A 
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图 3-5 自动 售 货 机 软件 的 因果 图 


在 图 3-5 中 ,原因 在 图 的 最 左边 ,结果 在 图 的 最 右边 ,中 间 结 点 则 排列 在 图 的 中 间 位 
置 。 由 于 2、3 号 原因 不 能 同时 出 现 ,4、5 号 原因 也 不 能 同时 出 现 , 故 在 图 中 各 用 一 个 约束 
符号 下 加 以 标识 。 

(4) 将 因果 图 转换 为 判定 表 , 如 表 3-10 所 示 。 

在 构成 的 判定 表 中 ,各 原因 、 中 间 结 点 及 结果 的 取 值 为 0 表示 其 代表 的 状态 不 出 现 ; 
为 1 则 表示 状态 出 现 。 原 因 组 合共 有 32 列 , 但 第 1 一 5,9,13,17 一 21,25,29 列 因 违反 约 
束 条 件 ,第 16,32 列 因 没有 进行 任何 操作 ,第 8,12.24,28 列 因 不 符合 常理 ( 投 币 却 没 选择 
饮料 ) , 均 被 视 为 无 效 的 列 。 最 后 ,根据 32 列 中 剩 下 的 12 列 设计 测试 用 例 , 可 针对 每 一 列 
设计 一 个 测试 用 例 。 

这 个 例子 中 ,事实 上 在 分 析 问 题 时 进行 了 一 些 简 化 ,主要 有 以 下 几 点 : 

Q@ 判定 表 中 第 8,12,24,28 列 不 符合 常理 ( 投 币 却 没 选 饮料 ), 但 却 是 可 能 发 生 的 。 
可 以 考虑 对 规格 说 明 做 如 下 完善 : 若 在 投 币 后 n( 如 10) 秒 后 仍 没 选择 饮料 ,自动 售 货 机 
上 “请 选择 饮料 ”的 灯亮 。 进 而 根据 规格 说 明 改 进 因 果 图 和 判定 表 。 

@ 判定 表 中 第 14,15,30,31 列表 示 只 选择 饮料 却 没 投 币 。 对 规格 说 明 应 做 如 下 完 
善 : 只 选择 饮料 却 没 投 币 时 ,自动 售 货 机 上 “请 投 币 ”的 灯亮 。 进 而 根据 规格 说 明 改 进 因 
果 图 和 判定 表 。 

@ 判定 表 中 第 26 ,27 列表 示 在 自动 售 货 机 没 零钱 找 的 情况 下 投入 了 5 角 钱 ,此 时 自 
动 售 货 机 将 会 进入 有 零钱 找 的 状态 ,由 于 在 规格 说 明和 因果 图 中 没有 考虑 这 一 特殊 情况 ， 
故 判定 表 第 26,27 列 的 第 21 号 结果 没有 从 1 变 为 0, 实际 上 是 不 正确 的 。 在 规格 说 明 中 
应 对 此 种 情况 加 以 考虑 ,进而 改进 因果 图 和 判定 表 。 

@ 判定 表 中 第 6,7 列 对 应 的 是 自动 售 货 机 在 有 零钱 找 的 情况 下 找 了 5 角 钱 ,此 时 自 
动 售 货 机 可 能 进入 无 零钱 找 的 状态 ,但 在 规格 说 明和 因果 图 中 没有 考虑 这 一 特殊 情况 , 故 
判定 表 第 6,7 列 的 第 21 号 结果 的 值 不 一 定 正确 。 在 规格 说 明 中 应 对 此 种 情况 加 以 考虑 ， 
进而 改进 因果 图 和 判定 表 。 
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3.3.5 判定 表 法 

在 因果 图 方法 中 用 到 了 判定 表 , 判 定 表 (Decision Table) 也 称 为 决策 表 , 是 软件 工程 
实践 中 的 重要 工具 ,主要 用 在 软件 开发 的 详细 设计 阶段 。 判 定 表 的 作用 与 因果 图 类 似 , 能 
表示 输入 条 件 的 组 合 ,以 及 与 每 一 输入 组 合 相 对 应 的 动作 组 合 , 因 此 判定 表 与 因果 图 的 使 
用 场合 类 似 。 


判定 表 的 构造 形式 如 图 3-6 所 示 。 

对 判定 表 中 的 5 个 部 分 解释 如 下 : ECE 

(1) 条 件 桩 。 列 出 所 有 可 能 的 条 件 。 条 件 的 顺序 一 | 动人 和 而 人 顾 
般 不 重要 。 

(2) 条 件 项 。 列 出 所 有 的 条 件 取 值 组 合 。 若 有 若 二 规则 
个 条 件 项 ,每 一 条 件 项 为 一 个 条 件 取 值 组 合 。 而 


(3) 动作 桩 。 列 出 所 有 可 能 的 操作 。 
(4) 动作 项 。 列 出 在 每 一 种 条 件 取 值 组 合 情 况 下 ,执行 动作 桩 中 的 哪些 动作 。 故 动 
作 项 的 数目 与 条 件 项 相等 。 
(5) 规则 。 一 种 条 件 取 值 组 合 与 其 对 应 的 动作 组 合 ( 即 判定 表 中 贯穿 条 件 项 和 动作 项 
的 一 列 ) 构 成 判定 表 中 的 一 个 规则 。 条 件 取 值 组 合 的 数目 就 是 规则 的 数目 ,如 在 图 3-5 中 ， 
有 5 个 原因 ,每 个 原因 可 取 0 或 1, 故 条 件 取 值 组 合 的 数目 为 32, 所 以 规则 也 为 32 个 。 有 一 
些 规则 因 条 件 取 值 组 合 违反 约束 条 件 或 不 做 任何 动作 而 成 为 无 效 规则 ,可 以 废弃 掉 。 
建立 判定 表 可 遵循 的 步骤 如 下 : 
@ 列 出 条 件 桩 和 动作 桩 。 
@ 确定 规则 的 个 数 , 用 来 为 规则 编号 。 车 及 n 个 原因 ,由 于 每 个 原因 可 取 0 或 1, 故 
有 2" 个 规则 。 
@ 完成 所 有 条 件 项 的 填写 。 
@ 完成 所 有 动作 项 的 填写 。 
@ 合并 相似 规则 ,用 以 对 初始 判定 表 进行 简化 。 
建立 了 判定 表 后 ,可 针对 判定 表 中 的 每 一 列 有 效 规则 设计 一 个 测试 用 例 , 用 于 对 程序 
进行 黑 盒 测 试 。 
3.3.4 小 节 和 3. 3. 5 小 节 介 绍 的 因果 图 法 和 判定 表 法 无 论 从 使 用 场合 还 是 实施 策略 
来 看 都 是 十 分 类 似 的 。 一 般 说 来 , 当 输入 条 件 存在 多 个 取 值 组 合 , 不 同 的 取 值 组 合 对 应 于 
不 完全 相同 的 动作 组 合 时 ,可 考虑 使 用 因果 图 法 或 判定 表 法 。 若 能 直接 根据 规格 说 明 建 
立 判 定 表 , 可 用 判定 表 法 : 若 规格 说 明 比 较 复杂 ,可 先 画 出 因果 图 ,再 建立 判定 表 , 利 用 判 
定 表 设计 测试 用 例 。 关 于 判定 法 的 实例 可 参见 3. 3. 4 小 节 的 实例 。 
3.3.6 正 交 试验 法 
用 黑 盒 方法 设计 测试 用 例 时 ,由 于 输入 条 件 和 输出 数据 的 多 样 性 ,和 欲 使 设计 测试 用 例 
盖 每 一 输入 及 输出 取 值 组 合成 为 一 件 十 分 困难 的 事 , 如 何 有 效 地 缩减 测试 用 例 的 数目 ， 
用 较 少 的 测试 用 例 对 软件 进行 较 全 面 的 测试 ,从 而 提高 测试 效率 、 控 制 测试 成 本 ? 通过 正 
交 试验 设计 法 进行 测试 用 例 的 设计 可 以 较 好 地 达到 这 一 目的 。 
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为 了 能 够 清楚 地 理解 对 正 交 试 验 法 设计 测试 用 例 , 先 看 如 下 示例 。 

为 提高 某 化 学 产品 的 转化 率 , 选 择 3 个 有 关 因 素 进行 条 件 试验 ,它们 分 别 是 反应 温度 
人 A、 反应 时 间 B 和 用 碱 量 C ,并 确定 其 取 值 范围 为 : 

A: 80~90°C; 

B.: 90~150min; 

C: 5%~7%。 

试验 目的 是 确定 因素 A, B,C 对 转化 率 有 什么 影响 ,哪些 是 主要 的 ,哪些 是 次 要 的 ， 
从 而 确定 最 佳 生产 条 件 , 即 使 转化 率 最 高 时 的 温度 、 时 间 和 用 碱 量 。 

注意 如 下 两 个 概念 : 

。 因素 : 也 称 为 因子 , 即 试验 中 要 考查 的 变量 ; 

。 水 平 : 在 试验 范围 内 变量 的 取 值 。 
这 里 ,对 因子 A 在 试验 范围 内 选取 了 3 个 水 平 ,因子 B 和 C 也 都 选取 3 个 水 平 。 

A: Ai1=80°C ,A,=85°C ,A;=90°C; 

B.: B=90min,B,=120min,B;=150min; 

C: C1=5% ,Cs=6% ,Cs=7%, 

这 个 3 因子 3 水 平 的 条 件 试验 ,通常 有 下 面 两 种 试验 方法 。 

(1) 全 面试 验 法 

取 3 因子 所 有 水 平 之 间 的 组 合 , 即 Ai BC ,ABC: ,ABC ,As BiCs , 共 3 一 27 
个 试验 点 (如 图 3-7 所 示 立 方 体 中 的 27 个 节点 ) , 故 共 需 进行 27 次 试验 。 
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图 3-7 全 面试 验 法 图 例 


全 面试 验 法 无 疑 是 一 种 对 各 种 试验 条 件 考虑 最 全 面 的 方法 ,但 当 因 子 数 和 因子 水 平 
数 增加 时 ,试验 次 数 急 剧 增加 。 所 以 ,全 面试 验 法 只 适合 于 因子 数 和 因子 水 平 数 均 很 小 的 
试验 场合 。 

(2) 单 因素 轮换 试验 法 

单 因素 轮换 试验 是 将 多 因素 试验 问题 转化 为 单 因 素 试验 问题 的 处 理 方法 。 在 这 种 试验 
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中 ,每 次 只 变化 一 个 因素 ,其 他 因素 固定 。 例 如 对 于 上 例 , 首 先 固定 B,C 于 Bi ,C ,使 A 变 化 : 


车 A 取 As 时 试验 结果 最 好 , 则 固定 A 于 A:,C 仍 取 C ,使 也 变化 : 


Bi 
4C<e (最 好 ) 
B; 


若 B 取 Bs 时 试验 结果 最 好 , 则 固定 B 于 B.A 于 A;, 使 C 变 化 : 


Ci 
ABC 最) 
G 


若 C 取 C* 时 试验 结果 最 好 ,就 认为 最 好 的 工艺 条 件 是 As B,C 。 
单 因素 轮换 试验 法 的 最 大 优点 就 是 试验 次 数 少 ,但 主要 存在 如 下 缺点 : 
。 试验 点 的 分 布 并 不 均匀 ,因而 试验 不 能 全 面 地 反应 各 种 情况 。 例 如 按 上 述 方法 进 
行 试验 ,试验 点 完全 分 布 在 一 个 角 上 ,而 没有 在 一 个 很 大 的 范围 内 选 点 ,因此 所 选 
的 工艺 条 件 A;B,C; 不 一 定 是 27 种 组 合 中 最 好 的 。 
。 用 此 方法 比较 试验 条 件 时 ,是 将 单个 试验 数据 进行 数值 上 的 简单 比较 ,而 试验 数 
据 中 必然 包含 误差 成 分 ,因而 会 造成 试验 结论 的 不 稳定 。 
如 何 兼 具 以 上 两 种 试验 方法 的 优点 ,从 全 面试 验 的 点 中 选择 具有 典型 性 .代表 性 的 
点 ,使 试验 点 在 试验 范围 内 分 布 均匀 , 且 试 验 点 尽量 地 少 呢 ? 
例如 上 面 的 例子 ,对 应 于 A 有 Al,Az ,As 3 个 平面 ,对 应 于 B,C 也 各 有 3 个 平面 , 共 
9 个 平面 , 则 这 9 个 平面 上 的 试验 点 都 应 当 一 样 多 ,. 即 对 每 个 因子 的 每 个 水 平 都 要 同等 看 
待 。 具 体 来 说 ,每 个 平面 上 都 有 3 行 、3 列 , 要 求 在 每 行 、 每 列 上 的 点 一 样 多 。 这 样 ,做 出 
设计 如 图 3-8 所 示 ,试验 点 用 名 表示 。 可 以 看 到 ,在 9 个 平面 中 每 个 平面 上 都 恰好 有 3 个 
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图 3-8 试验 点 均匀 分 布 方案 图 例 
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点 ,而 每 个 平面 的 每 行 每 列 都 有 1 个 点 , 且 只 有 1 个 点 ,总 共 9 个 点 。 这 样 的 试验 方案 , 试 
验 点 的 分 布 很 均匀 ,试验 次 数 也 不 多 。 

当 因 子 数 和 水 平 数 都 不 太 大 时 , 尚 可 通过 作 图 的 办 法 选择 分 布 很 均匀 的 试验 点 。 但 
当 因子 数 和 水 平 数 增加 后 ,因子 取 值 组 合 的 数目 会 急剧 增加 , 作 图 的 方法 就 难以 奏效 了 。 
此 时 可 以 采用 正 交 试 验 设计 方法 。 

正 交 试 验 设 计 方法 是 一 种 多 因素 多 水 平 的 试验 设计 方法 。 它 应 用 依据 Galois 理论 
导出 的 正 交 表 , 从 大 量 试验 条 件 中 挑选 出 适量 的 有 代表 性 的 条 件 ( 即 试验 点 ) 来 合理 地 安 
排 试验 。 运 用 这 种 方法 安排 的 试验 具有 “均匀 分 散 、 整 齐 可 比 ” 的 特点 。 均 匀 分 散 性 使 试 
验 点 均衡 地 分 布 在 试验 范围 内 ,每 个 试验 点 有 充分 的 代表 性 ;整齐 可 比 性 使 试验 结果 的 分 
析 十 分 方便 ,可 以 估计 各 因素 对 指标 的 影响 , 找 出 影响 事物 变化 的 主要 因素 。 

正 交 表 的 形式 为 Li(m"), 其 中 /为 正 交 表 的 行 数 , 即 试验 次 数 ;n 为 正 交 表 列 的 数目 ， 
即 最 多 可 以 安排 的 因子 数 ;m 为 因子 的 水 平 数 。 

常用 的 正 交 表 有 Ls (27) ,Ls (3:),Li6 (45),Ls (4X2:),Lis (2X3) 等 。 例 如 Ls (2’) 
中 ,7 为 正 交 表 的 列 数 ,2 为 因子 的 水 平 数 ,8 为 正 交 表 的 行 数 即 试验 次 数 。 又 例如 Ls (4X 
2 ) 则 表示 , 正 交 表 中 有 4 列 是 2 水 平 的 ,1 列 是 4 水平 的 , 正 交 表 共 8 行 。 

在 行 数 为 abCa,b 为 正 整数 ) 的 正 交 表 中 , 行 数 = >) (每 列 水 平 数 一 1) 十 1。 利 用 该 
式 可 以 通过 所 要 考查 的 因子 水 平 数 决定 最 少 的 试验 次 数 , 从 而 选择 合适 的 正 交 表 。 如 要 
考查 5 个 3 水 平 因子 和 1 个 2 水 平 因子 , 则 最 少 的 试验 次 数 为 5X (3 一 1) 十 1X(2 一 1) 十 1 一 
12, 故 应 在 行 数 不 小 于 12 且 有 5 个 以 上 3 ET 1 个 以 上 2 水平 列 的 正 交 表 中 进行 选 
nt ed 

正 交 表 具 有 如 下 两 条 性 质 : 

。 每 一 列 中 各 数字 出 现 的 次 数 一 样 多 。 

。 任意 两 列 中 包含 的 各 有 序数 对 出 现 的 次 数 一 样 多 。 

如 在 表 3-11 所 示 的 Ls(3*) 中 ,各 列 中 的 水 平 取 值 1,2,3 都 各 出 现 3 次 ,任意 两 列 都 
包含 9 种 数 对 ,每 种 数 对 都 各 出 现 1 次 。 


表 3-11 正 交 表 Los(34) 


和 
列 号 i 2 3 4 


lolrliolelrlioleslr 
Sc|iol--|Iwolv|lwlv|- 
-IiwolvliIv|ic|iwlwlv|i- 


wieol~loloaln lw lvl- 
wwwolvIvIv|I-|i-|- 
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下 面 我 们 回 到 本 小 节 最 开始 的 例子 ,看 如 何 用 正 交 试验 设计 方法 为 该 例 设计 试验 方 
案 。 显 然 , 该 例 有 3 个 3 水 平 因 子 , 故 需 进行 的 试验 次 数 为 3X (3 一 1) 十 1 二 7, 故 选取 正 
交 表 Ls(3*)。 正 交 表 Ls(3:) 有 4 列 , 而 该 例 只 有 3 个 因子 ,每 个 因子 对 应 正 交 表 的 一 列 ， 
可 仅 使 用 表 中 前 3 列 。 设 正 交 表 Ls (3) 第 1 列 水 平 取 值 1,2,3 分 别 代 表 A 二 80°C ,A,== 
85'C ,A:=90 ;第 2 列 水 平 取 值 1,2,3 分 别 代表 B, 王 90min,B: 王 120min,B: 王 150min; 
第 3 列 水 平 取 值 1,2,3 分 别 代 表 Ci = 二 5% ,Cs 二 6%,Cs 二 7%。 由 此 ,可 得 出 正 交 试验 设 
计 方 案 , 如 表 3-12 所 示 。 


表 3-12 由 L,(3:) 得 出 的 正 交 试验 方案 


试 验 条 件 
试 验 号 水 平 组 合 
反应 温度 /C 反应 时 间 /min 用 碱 量 /% 
1 A BG 80 90 5 
2 国人 80 120 6 
3 Ai, Bs Cs 80 150 
4 A BG 85 90 6 
5 dB Gs 85 120 7 
6 As ByGL 85 150 5 
7 A BC 90 90 
8 BG 90 120 5 
9 人 90 150 6 


在 表 3-11 中 ,每 一 行 的 各 水 平 组 合 就 构成 了 一 个 试验 条 件 , 也 对 应 于 测试 中 的 一 个 
测试 用 例 。 

由 前 文 可 知 ,对 于 此 例 , 若 用 全 面试 验 法 需 进 行 27 次 试验 ,而 使 用 正 交 试验 设计 法 ， 
将 试验 次 数 缩减 到 9 次 , 且 这 9 次 试验 在 一 定 意义 上 代表 了 27 次 试验 ,从 而 大 大 提高 了 
试验 的 效率 。 

用 正 交 试验 设计 方法 设计 测试 用 例 的 基本 步骤 如 下 : 

(1) 确定 因子 。 即 确定 对 软件 的 运行 结果 有 影响 的 因素 。 一 般 情况 下 是 指 软件 的 输 
入 ,以 及 软件 运行 的 其 他 环境 。 这 些 因 子 可 以 通过 对 软件 需求 规格 说 明 书 进行 分 析 而 获 
得 。 若 因子 太 多 ,可 根据 测试 成 本 要 求 剔 除 对 运行 结果 影响 不 大 的 因素 。 

(2) 确定 因子 的 取 值 范围 。 这 些 数据 可 以 通过 对 软件 需求 规格 说 明 书 进行 分 析 而 
得 到 。 

(3) 确定 每 个 因子 的 水 平 。 根 据 因子 的 取 值 范围 ,采用 等 价 类 划分 法 ,边界 值 分 析 法 
及 其 他 测试 用 例 设计 方法 ,在 每 个 因子 的 取 值 范围 内 挑选 出 有 代表 性 的 值 。 

(4) 选择 合适 的 正 交 表 。 根 据 确定 的 因子 和 水 平 , 选 择 一 张 合 适 的 正 交 表 ,以 满足 试 
验 中 的 因子 数 、 各 因子 水 平 数 及 试验 次 数 的 要 求 。 

(5) 设计 测试 用 例 表 。 正 交 表 中 的 一 行 对 应 于 各 因子 的 取 值 组 合 即 水 平 组 合 ,也 就 
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是 一 个 试验 条 件 。 故 可 根据 正 交 表 得 出 所 有 试验 条 件 , 从 而 得 到 测试 用 例 表 。 若 需要 对 
某 种 测试 结果 进行 直观 分 析 , 该 表 还 要 包括 其 他 内 容 , 如 响应 时 间 、 响 应 时 间 之 和 ,平均 响 
应 时 间 、 极 差 等 ,以 便于 找 出 影响 该 结果 的 主 次 要 因素 。 

对 正 交 试 验 设 计 及 正 交 表 更 深入 的 了 解 可 参见 概率 论 和 数理 统计 方面 的 书籍 。 
3.3.7 场景 法 

现在 的 软件 几乎 都 是 用 事件 触发 来 控制 流程 的 ,事件 触发 时 的 情景 即 为 场景 。 而 同 
一 事件 不 同 的 触发 顺序 和 处 理 结果 就 形成 了 事件 流 。 运 用 在 软件 设计 中 的 场景 法 也 可 用 
在 软件 测试 中 ,有 利于 测试 人 员 设计 测试 用 例 ,并 使 测试 用 例 更 容易 理解 和 执行 。 

提出 将 场景 法 用 于 测试 的 是 [BM Rational 公司 (Rational 公司 已 于 2003 年 被 IBM 
收购 ) ,在 其 RUP2000 中 文 版 中 对 场景 法 有 详细 的 介绍 。 

以 下 根据 RUP2000 对 场景 法 进行 介绍 。 


1. 场景 法 的 实施 策略 
场景 法 最 终生 成 的 测试 用 例 来 源 于 测试 目标 的 用 例 。 也 就 是 说 ,场景 法 是 从 用 例 生 
成 测试 用 例 。 
场景 法 通过 用 例 场景 描述 业务 操作 流程 。 它 为 每 个 用 例 场景 编制 测试 用 例 。 用 例 场 
景 要 通过 措 述 流 经 用 例 的 路 径 来 确定 ,这 个 流 经 过 程 从 用 例 开 始 到 结束 遍历 其 中 所 有 基 
本 流 (基本 事件 ) 和 备 选 流 (分 支 事件 )。 
例如 ,图 3-9 中 经 过 用 例 的 每 条 不 同 路 径 都 反映 了 a 
基本 流 和 备 选 流 ,都 用 箭头 来 表示 。 基 本 流 用 直 黑 线 基本 流 
表示 ,是 经 过 用 例 的 最 简单 的 路 径 。 每 个 备 选 流 自 基 上 才 


本 流 开始 ,之 后 备 选 流 会 在 某 个 特定 条 件 下 执行 。 备 
选 流 可 能 会 重新 加 入 到 基本 流 中 ( 备 选 流 1 和 3), 还 可 
能 起 源 于 另 一 个 备 选 流 ( 备 选 流 2) ,或 者 终止 用 例 而 不 | 


备 选 流 1 


再 重新 加 入 某 个 流 ( 备 选 流 2 和 4)。 Ws 


遵循 图 3-9 中 每 个 经 过 用 例 的 可 能 路 径 , 可 以 确 
定 不 同 的 用 例 场景 。 从 基本 流 开 始 ,再 将 基本 流 和 备 
选 流 结合 起 来 ,可 以 确定 以 下 用 例 场景 ,如 表 3-13 


1 结束 用 例 
结束 用 例 


图 3-9 用 例 的 事件 流 示例 


所 示 。 
表 3-13 由 图 3-9 确定 的 用 例 场景 
场景 1 基本 流 
场景 2 基本 流 备 选 流 1 
场景 3 基本 流 备 选 流 1 备 选 流 2 
场景 4 基本 流 备 选 流 3 
场景 5 基本 流 备 选 流 3 备 选 流 1 
场景 6 基本 流 备 选 流 3 备 选 流 1 备 选 流 2 
场景 7 基本 流 备 选 流 4 
场景 8 基本 流 备 选 流 3 备 选 流 4 


有 
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注意 ,为 方便 起 见 ,场景 5.6 和 8 只 描述 了 备 选 流 3 指示 的 循环 执行 一 次 的 情况 。 
生成 每 个 场景 的 测试 用 例 是 通过 确定 某 个 特定 条 件 来 完成 的 ,这 个 特定 条 件 将 导致 特定 
用 例 场景 的 执行 。 

例如 ,假定 图 3-9 描述 的 用 例 对 备 选 流 3 规定 如 下 : 

如 果 在 上 述 基 本 流 步骤 2* 输 入 提 款 金额 * 中 输入 的 美元 量 超出 当前 账户 余额 , 则 出 
现 此 事件 流 。 系 统 将 显示 一 则 警告 消息 ,之 后 重新 加 入 基本 流 , 再 次 执行 上 述 步 骤 2* 输 
入 提 款 金额 ”, 此 时 银行 客户 可 以 输入 新 的 提 款 金额 。 

据 此 ,可 以 开始 确定 需要 用 来 执行 备 选 流 3 的 测试 用 例 , 如 表 3-14 所 示 。 


表 3-14 需要 用 来 执行 备 选 流 3 的 测试 用 例 


测试 用 例 ID 场景 条 件 预期 结果 
TCz 场景 4 步骤 2 一 提 款 金额 二 账户 余额 在 步骤 2 处 重新 加 入 基本 流 
TCy 场景 4 步骤 2 一 提 款 金额 二 账户 余额 不 执行 备 选 流 3, 执 行 基本 流 
TCz 场景 4 步骤 2 一 提 款 金额 = 账户 余额 不 执行 备 选 流 3, 执 行 基本 流 


值得 注意 的 是 ,由 于 没有 提供 其 他 信息 ,以 上 显示 的 测试 用 例 都 非常 简单 ,实际 测试 
中 的 测试 用 例 很 少 如 此 简单 。 


2. 场景 法 举例 
下 面 给 出 一 个 场景 法 ( 即 从 用 例 生成 测试 用 例 ) 的 示例 。 
图 3-10 是 ATM 的 流程 图 。 


提 款 
人 转账 a 
客户 下 
存款 银行 系统 


系统 启动 


ATM 操作 员 
图 3-10 一 台 ATM 机 的 主角 和 用 例 


表 3-15 包含 了 图 3-10 中 提 款 用 例 的 基本 流 和 一 些 备 用 流 。 
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表 3-15 3-8 中 提 款 用 例 的 基本 流 和 某 些 备用 流 


本 用 例 的 开始 是 ATM 处 于 准备 就 绪 状 态 

@ 准备 提 款 : 客户 将 银行 卡 插入 ATM 机 的 读 卡 机 

@ 验证 银行 卡 : ATM 机 从 银行 卡 的 磁 条 中 读 取 账户 代码 ,并 检查 它 是 否 属于 可 
以 接收 的 银行 卡 

@ 输入 PIN: ATM 机 要 求 客 户 输入 PIN 码 (4 位 ) 

@ 验证 账户 代码 和 PIN: 验证 账户 代码 和 PIN 以 确定 该 账户 是 否 有 效 , 以 及 所 输 
入 的 PIN 对 该 账户 来 说 是 否 正确 ;对 于 此 事件 流 ,账户 是 有 效 的 ,而 且 PIN 对 
此 账户 来 说 正确 无 误 

@@ ATM 机 选项 : ATM 机 显示 在 本 机 上 可 用 的 各 种 选项 。 在 此 事件 流 中 ,银行 客 

基本 流 户 通常 选择 “ 提 款 ” 

@ 输入 金额 : 要 从 ATM 机 中 提取 的 金额 。 对 于 此 事件 流 , 客 户 需 选择 预 设 的 金 
额 (10 美元 ,20 美元 ,50 美元 或 100 美元 ) 

@ 授权 : ATM 机 通过 将 卡 ID .PIN .金额 及 账户 信息 作为 一 笔 交易 发 送 给 银行 系 
统 来 启动 验证 过 程 。 对 于 此 事件 流 ,银行 系统 处 于 联机 状态 ,而 且 对 授权 请 求 
给 予 答复 ,批准 完成 提 款 过 程 ,并 且 据 此 更 新 账户 余额 

@ 出 钞 : 提供 现金 

@ 返回 银行 卡 : 银行 卡 被 返还 

@@ 收据 : 打印 收据 并 提供 给 客户 ,ATM 机 还 相应 地 更 新 内 部 记录 

用 例 结束 时 ,ATM 机 又 回 到 准备 就 绪 状态 


备 选 流 1: 银行 | 在 基本 流 步骤 四 验证 银行 卡 中 ,如 果 卡 是 无 效 的 , 则 卡 被 退回 ,同时 会 通知 相关 
卡 无 效 消息 


备 选 流 2: ATM | 在 基本 流 步 又 加 ATM 机 选项 中 ,如 果 ATM 机 内 没有 现金 , 则 “ 提 款 ”选项 将 无 法 
机 内 没有 现金 ”| 使 用 


备 选 流 3: ATM | 在 基本 流 步骤 @@ 输 入 金额 中 ,如 果 ATM 机 内 金额 少 于 请 求 提 取 的 金额 , 则 将 显示 
机 内 现金 不 足 ”| 一 适当 的 消息 ,并 且 在 步骤 @ 输 入 金额 中 ,重新 加 入 基本 流 


@ 在 基本 流 步骤 田中 ,验证 账户 和 PIN ,客户 有 3 次 机 会 输入 PIN 

@ 如 果 PIN 输入 有 误 ,ATM 机 将 显示 适当 的 消息 ;如 果 还 存在 输入 机 会 , 则 此 事 
件 流 在 步骤 加 输入 PIN 处 重新 加 入 基本 流 

@ 如 果 最 后 一 次 尝试 输入 的 PIN 码 仍然 错误 , 则 该 卡 将 被 ATM 机 保留 ,同时 
ATM 机 返回 准备 就 绪 状态 ,本 用 例 终 止 


备 选 流 4: PIN 
有 误 


@ 在 基本 流 步骤 @ 验 证 账户 代码 和 PIN 中 ,如 果 银 行 系统 返回 的 代码 表明 找 不 到 
@ 该 账户 或 禁止 从 该 账户 中 提 款 , 则 ATM 机 显示 适当 的 消息 并 且 在 步骤 加 返回 
银行 卡 处 重新 加 入 基本 流 


备 选 流 5: 账户 
不 存在 


在 基本 流 步 又 授权 中 .银行 系统 返回 代码 表明 账户 余额 少 于 在 基本 流 步骤 @ 输 
和 人 金额 中 输入 的 金额 , 则 ATM 机 显示 适当 的 消息 并 且 在 步骤 @ 输 入 金额 中 重新 
加 入 基本 流 


备 选 流 6: 账面 
金额 不 足 


备 选 流 7: 达到 | 在 基本 流 步骤 @ 授 权 中 ,银行 系统 返回 的 代码 表明 包括 本 提 款 请 求 在 内 ,客户 已 
每 日 最 大 的 提 | 经 或 将 超过 在 24 小 时 内 允许 提取 的 最 多 金额 , 则 ATM 机 显示 适当 的 消息 并 在 步 
款 金 额 又 @ 输 入 金额 上 重新 加 入 基本 流 


如 果 在 基本 流 步 又 四 收据 中 记录 无 法 更 新 , 则 ATM 机 进入 “安全 模式 ”。 在 此 模 
式 下 所 有 功能 都 将 暂停 使 用 ,同时 向 银行 系统 发 送 一 条 适当 的 警报 信息 表明 
ATM 机 已 经 暂停 工作 


备 选 流 x: 记录 
错误 


J 
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备 选 流 >: 退出 | 客户 可 随时 决定 终止 交易 (退出 )。 交 易 终止 ,银行 卡 随 之 退出 


ATM 机 包含 大 量 的 传感器 .用 于 监控 各 种 功能 ,如 电源 检测 器 .不 同 的 门 和 出 人 
口 处 的 测 压 器 ,以 及 动作 检测 器 等 。 在 任 一 时 刻 ,如 果 某 个 传感器 被 激活 , 则 警报 
信号 将 发 送 给 警方 旦 ATM 机 进入 “安全 模式 ”, 在 此 模式 下 所 有 功能 都 暂停 使 用 ， 
直到 采取 适当 的 重启 /重新 初始 化 的 措施 


备 选 流 x:“ 手 起 ” 


在 第 一 次 迭代 中 ,根据 迭代 计划 ,我们 需要 核实 提 款 用 例 已 经 正确 地 实施 。 此 时 尚未 实施 整个 用 例 ， 
只 实施 了 下 面 的 事件 流 。 

基本 流 : 提取 预 设 金额 (10 美元 ,20 美元 ,50 美元 ,100 美元 ) 

备 选 流 2: ATM 内 没有 现金 

备 选 流 3: ATM 内 现金 不 足 

备 选 流 4: PIN 有 误 

备 选 流 5: 账户 不 存在 /账户 类 型 有 误 

备 选 流 6: 账户 金额 不 足 


从 这 个 用 例 可 以 生成 下 列 场景 ,如 表 3-16 所 示 。 


表 3-16 场景 设计 

场景 描 述 基本 流 备 选 流 
场景 1 成 功 提 款 基本 流 

场景 2 ATM 内 没有 现金 基本 流 备 选 流 2 
场景 3 ATM 内 现金 不 足 基本 流 备 选 流 3 
场景 4 PIN 有 误 ( 还 有 输入 机 会 ) 基本 流 备 选 流 4 
场景 5 PIN 有 误 (不 再 有 输入 机 会 ) 基本 流 备 选 流 4 
场景 6 账户 不 存在 /账户 类 型 有 误 基本 流 备 选 流 5 
场景 7 账户 余额 不 足 基本 流 备 选 流 6 


注意 ,为 了 方便 起 见 , 备 选 流 3 和 6( 场 景 3 和 7) 内 的 循环 及 循环 组 合 未 纳入 表 3-16 
中 。 

对 于 这 7 个 场景 中 的 每 一 个 场景 ,都 需要 确定 测试 用 例 。 可 以 采用 矩阵 或 判定 表 来 
确定 和 管理 测试 用 例 。 表 3-17 显示 了 一 种 通用 格式 ,其 中 各 行 代表 各 个 测试 用 例 , 而 各 
列 则 代表 测试 用 例 的 信息 。 本 示例 中 ,对 于 每 个 测试 用 例 , 存 在 一 个 测试 用 例 ID、 条 件 
(或 说 明 ) ,测试 用 例 中 涉及 的 所 有 数据 元 素 ( 作 为 输入 或 已 经 存在 于 数据 库 中 ) 以 及 预期 
结果 。 

通过 从 确定 执行 用 例 场 景 所 需 的 数据 元 素 人 手 构建 矩阵 ,然后 对 于 每 个 场景 至 少 要 
确定 包含 执行 场景 所 需 的 适当 条 件 的 测试 用 例 。 例 如 , 表 3-17 中 ,V( 有 效 ) 用 于 表明 这 
个 条 件 必须 是 Valid( 有 效 的 ) 才 可 执行 基本 流 , 而 I( 无 效 ) 用 于 表明 这 种 条 件 下 将 激活 所 
需 备 选 流 ;n/a( 不 适用 ) 表 明 这 个 条 件 不 适用 于 测试 用 例 。 
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表 3-17 测试 用 例 表 


TC 
尖 入 人 的 全 账面 |ATM 机 内 
试用 例 ) 场景 /条 件 PIN | 账号 | 额 ( 或 迁 | 各 | 的 全 预期 结果 
ID 号 择 ) 的 金额 - 
CWI | 场景 1: 成 功 提 款 viy V V V | 成 功 地 提 款 
Cwa | 场景 2 ATM 内 没有 | | v 要 提 款 选项 不 可 用 ,用 
现金 例 结束 
场景 3: ATM 内 现金 警告 消息 ,返回 基本 
CW3 V V V V 
求 是 流 步骤 @ 输 入 金额 
Cw | 场景 4 PIN 有 误 (还 | | v a | 警告 消息 ,返回 基本 
有 不 止 一 次 输入 机 会 ) ui 流 步骤 @, 输 入 PIN 
Cws | 场 最 4 PIN 有 误 ( 还 | | | v 本 | 警告 消息 ,返回 基本 
有 一 次 输入 机 会 ) 流 步骤 @, 输 入 PIN 
Cw | 场 最 4 PIN 有 误 ( 不 | | v V | 警告 消息 , 卡 予 保 
再 有 输入 机 会 ) 留 ,用 例 结束 
表 3-17 中 ,6 个 测试 用 例 执行 了 4 个 场景 。 对 于 基本 流 , 上 述 测试 用 例 CW1 称 为 正 
面 测 试用 例 。 它 一 直 沿 着 用 例 的 基本 流 路 径 执行 ,未 发 生 任 何 偏 差 。 基 本 流 的 全 面 测试 


必须 包括 负面 测试 用 例 ,以 确保 只 有 在 符合 条 件 的 情况 下 才 执行 基本 流 。 这 些 负面 测试 
用 例 由 CW2 一 CW6 表示 (阴影 单元 格 表明 这 种 条 件 下 需要 执行 备 选 流 ) 。 虽 然 CW2 一 
CW6 对 于 基本 流 而 言 都 是 负面 测试 用 例 ,但 它们 相对 于 备 选 流 2 一 4 而 言 是 正面 测试 用 
例 。 而 且 对 于 这 些 备 选 流 中 的 每 一 个 而 言 ,至少 存 在 一 个 负面 测试 用 例 (CW1 ,基本 流 ) 。 

每 个 场景 只 具有 一 个 正面 测试 用 例 和 负面 测试 用 例 是 不 充分 的 ,场景 4 正 是 这 样 的 
一 个 示例 。 要 全 面 地 测试 场景 4PIN 有 误 , 至 少 需要 下 面 3 个 正面 测试 用 例 ( 以 激活 场 
景 4) 。 

Q@ 输入 了 错误 的 PIN ,但 仍 存在 输入 机 会 ,此 备 选 流 重新 加 入 基本 流 中 的 步骤 @ 回 答 
入 PIN。 

@ 输入 了 错误 的 PIN ,而 且 不 再 有 输入 机 会 , 则 此 备 选 流 将 保留 银行 卡 并 终止 用 例 。 

@ 最 后 一 次 输入 时 输入 了 正确 的 PIN。 备 选 流 在 步骤 @ 输 入 金额 处 重新 加 入 基 
本 流 。 

注意 , 表 3-17 中 无 须 为 条 件 (数据 ) 输 入 任何 实际 的 值 。 以 这 种 方式 创建 测试 用 例 表 
(和 矩阵) 的 一 个 优点 在 于 容易 看 到 测试 的 条 件 。 由 于 只 需要 查看 V 和 I( 或 此 处 采用 的 阴 
影 单元 格 ) ,这 种 方式 还 易于 判断 是 否 已 经 确定 了 充足 的 测试 用 例 。 从 表 中 可 发 现存 在 几 
个 条 件 不 具备 阴影 单元 格 ,表明 测试 用 例 还 不 完全 ,如 场景 6 不 存在 的 账户 /账户 类 型 有 
误 和 场景 7 账户 余额 不 足 就 缺少 测试 用 例 。 

一 且 确 定 了 所 有 测试 用 例 , 则 应 对 这 些 用 例 进行 复审 和 验证 以 确保 其 准确 且 适 度 ,并 
取消 多 余 或 等 效 的 测试 用 例 。 

测试 用 例 一 经 认可 ,就 可 以 确定 实际 数据 值 (在 测试 用 例 实施 矩阵 中 ) 并 且 设 定 测 试 


60 软件 测试 
2 数据 ,如 表 3-18 所 示 。 
表 3-18 测试 数据 表 
TC( 测 输入 的 金 
试用 例 )| 。 场景 /条 件 。 | PIN | 隆 号 “| 祷 ( 或 迁 | 全 丽 | 人 | 。 预期 结 果 
ID 号 择 的 金额 ) 
成 功 地 提 款 。 账 
CW1 | 场景 1: 成 功 提 款 4987 | 809 一 498 | 50.00 | 500.00 | 2000. 00 | 户 余额 被 更 新 为 
450. 00 
场景 2: ATM 内 没 加 提 款 选项 不 可 
CW2 有 现金 4987 | 809 一 498 | 100.00 | 500.00 | 0.00 用 ,用 例 结束 
警告 消息 ,返回 
CW3 2 ATM 内 现 | 4987 | so9 一 498 | 100.00 | 500.00 | 70.00 基本 流 步 骤 @ 输 
入 金额 
场景 4: PIN 有 误 警告 消息 ,返回 
CW4 | (还 有 不 止 一 次 输入 | 4978 | 809 一 498 n/a 500. 00 | 2000. 00 | 基本 流 步骤 @ 输 
机 会 ) 入 PIN 
场景 4: PIN 有 误 警告 消息 ,返回 
CW5 | (还 有 一 次 输入 机 | 4978 | 809 一 498 n/a 500. 00 | 2000. 00 | 基本 流 步骤 回答 
会 ) 入 PIN 
场景 4: PIN 有 误 警告 消息 , 卡 予 
CW6 (不 再 有 输入 机 会 ) 4978 | 809 一 498 n/a 500. 00 | 2000. 00 保留 ,用 例 结束 


以 上 测试 用 例 只 是 在 本 次 迭代 中 需要 用 来 验证 提 款 用 例 的 一 部 分 测试 用 例 , 需 要 的 
其 他 测试 用 例如 下 。 

场景 6 账户 不 存在 /账户 类 型 有 误 : 未 找到 账户 或 账户 不 可 用 。 

场景 6 账户 不 存在 /账户 类 型 有 误 : 禁止 从 该 账户 中 提 款 。 

场景 7 账户 余额 不 足 : 请 求 的 金额 超出 账户 金额 。 

在 将 来 的 迭代 中 , 当 实施 其 他 事件 流 时 ,在 下 列 情况 下 将 需要 测试 用 例 : 
无 效 卡 ( 所 持 卡 为 挂失 卡 、 被 盗 卡 、 非 承兑 银行 发 卡 、 卡 磁 条 损坏 等 )。 
无 法 读 卡 ( 读 卡 机 堵塞 、 脱 机 或 出 现 故障 ) 。 
账户 已 销 户 ,冻结 或 由 于 其 他 方面 原因 无 法 使 用 。 
ATM 机 内 现金 不 足 或 不 能 提供 所 请 求 的 金额 。 注 意 与 CW3 不 同 , 在 CW3 中 只 
是 一 种 币值 不 足 ,而 不 是 所 有 币值 都 不 足 。 
无 法 联系 银行 系统 以 获得 认可 。 
银行 网 络 离线 或 交易 过 程 中 断 电 。 
3.3.8 功能 图 法 

每 个 程序 的 功能 通常 由 静态 说 明和 动态 说 明 组 成 ,动态 说 明 描 述 了 输入 数据 的 次 序 
或 者 转移 的 次 序 ; 静 态 说 明 描 述 了 输入 条 件 与 输出 条 件 之 间 的 对 应 关系 。 对 于 比较 复杂 
的 程序 ,由 于 大 量 组 合 情 况 的 存在 ,如 果 仅仅 使 用 静态 说 明 来 组 织 测试 往往 是 不 够 的 ,还 
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必须 有 动态 说 明 来 补充 。 功 能 图 法 就 是 因此 而 产生 的 一 种 测试 用 例 设计 方法 。 

功能 图 法 就 是 使 用 功能 图 形式 化 地 表示 程序 的 功能 说 明 , 并 机 械 地 生成 功能 图 的 测 
试用 例 。 功 能 图 模型 由 状态 迁移 图 和 逻辑 功能 模型 组 成 。 

(1) 状态 迁移 图 用 于 表示 输入 数据 序列 及 相应 的 输出 数据 ,由 输入 和 当前 的 状态 决 
定 输出 数据 和 后 续 状 态 。 

(2) 逻辑 功能 模型 用 于 表示 在 状态 中 输入 条 件 与 输出 条 件 之 间 的 对 应 关系 。 逻 辑 功 
能 模型 只 适合 于 描述 静态 说 明 ,输出 数据 仅仅 由 输入 数据 决定 。 测 试用 例 由 测试 中 经 过 
的 一 系列 状态 ,以 及 在 每 个 状态 中 必须 依靠 输入 /输出 数据 满足 的 一 对 条 件 组 成 。 

功能 图 法 是 一 种 黑 盒 和 和 白 盒 混合 用 例 设 计 方法 。 在 功能 图 法 中 ,需要 用 到 逻辑 覆盖 
和 路 径 测 试 的 概念 和 方法 ,这 属于 白 盒 设计 方法 ;而 确定 输入 数据 序列 及 相应 的 输出 数 
据 , 则 是 黑 盒 设 计 方法 。 


3.4 黑 盒 测试 方法 的 综合 使 用 策略 


在 使 用 黑 盒 测试 方法 时 ,只 有 结合 被 测 软件 的 特点 ;有 选择 地 使 用 若干 种 方法 , 方 能 
达到 良好 的 测试 效果 。 

黑 盒 测 试 方法 的 综合 使 用 策略 如 下 : 

(1) 首先 进行 等 价 类 划分 ,包括 输入 条 件 和 输出 条 件 的 等 价 划分 ,将 无 限 测试 变 成 有 
限 测试 ,这 是 减少 工作 量 和 提高 测试 效率 最 有 效 的 方法 。 等 价 类 划分 也 常 是 边界 值 方法 
的 基础 。 

(2) 在 任何 情况 下 都 必须 使 用 边界 值 分 析 方法 。 经 验 表 明 , 用 这 种 方法 设计 出 的 测 
试用 例 发 现 程序 错误 的 能 力 最 强 。 

(3) 测试 人 员 可 以 根据 经 验 用 错误 推测 法 追加 一 些 测试 用 例 。 

(4) 如 果 程 序 的 功能 说 明 中 含有 输入 条 件 的 组 合 情 况 , 则 一 开始 就 可 选用 因果 图 法 
和 判定 表 法 。 

(5) 对 于 参数 配置 类 软件 ,应 用 正 交 试 验 法 选择 较 少 的 组 合 方式 以 达到 最 佳 效果 ,并 
减少 测试 用 例 的 数目 。 

(6) 对 于 业务 流 清 晰 的 系统 可 以 利用 场景 法 。 即 可 先 综合 使 用 各 种 方法 生成 用 例 ， 
再 通过 场景 法 由 用 例 生成 用 例 。 

(7) 当 程 序 的 功能 较 复杂 、 存 在 大 量 组 合 情 况 时 ,可 以 考虑 使 用 功能 图 法 。 


3.5 小 结 


本 章 介 绍 了 测试 用 例 的 含义 和 设计 准则 。 测 试用 例 的 设计 是 软件 测试 中 的 重 中 之 
重 , 直 接 关 系 到 测试 工作 的 成 功 与 否 。 黑 盒 测 试 法 在 软件 测试 用 例 的 设计 方法 中 占有 重 
要 的 地 位 ,相对 于 白 盒 测试 方法 , 黑 盒 测试 方法 是 站 在 较 宏 观 的 角度 设计 测试 用 例 和 进行 
测试 活动 的 。 本 章 介绍 的 几 种 黑 盒 测 试 方法 中 ,每 种 方法 都 有 自身 的 特点 ,实用 时 需 结合 


有 
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具体 的 被 测 软件 的 特点 灵活 地 选择 黑 盒 测试 方法 。 


习 题 


口上 oo 一 


. 什么 是 测试 用 例 ? 设计 测 试用 例 时 应 遵循 哪些 基本 准则 ? 

. 测试 用 例 的 设计 方法 主要 包括 哪 几 种 ? 

. 黑 盒 测试 的 含义 是 什么 ? 

. 需求 规格 说 明 的 全 面 、 准 确 与 否 将 影响 黑 盒 测 试 的 执行 效果 ,为 什么 ? 
. 边界 值 方法 和 等 价 类 方法 的 关系 是 怎样 的 ? 

. 错误 推测 法 设计 测试 用 例 的 依据 是 什么 ? 

. 有 一 个 评定 并 打印 学 生成 绩 等 级 的 程序 ,其 规格 说 明 如 下 : 


成 绩 满分 为 100 分 ,学 生成 绩 记 为 zx。 若 90 志 x 三 100, 打 印 等 级 为 * 优 ”; 若 80 生 zx 二 
90 ,打印 等 级 为 “ 良 ”; 车 70 三 x 二 80, 打 印 等 级 为 “中 ”; 若 60 委 z 扫 70, 打 印 等 级 为 “及 
格 ”; 车 0 三 x 二 60, 打 印 等 级 为 “不 及 格 ”; 车 z+ 二 0 或 xx 二 100 或 x 中 含有 非 数 字 字符 , 打 
印 为 “无 效 成 绩 ”"。 试 根据 此 规格 说 明 用 等 价 类 方法 、 边 界 值 方法 和 错误 推测 法 共同 完成 
针对 该 程序 功能 的 黑 盒 测试 用 例 设计 。 

8. 在 什么 情况 下 应 使 用 因果 图 法 或 判定 表 法 ? 

9. 在 3.3.4 小节 介 绍 的 自动 售 货 机 软件 的 例子 中 ,对 其 规格 说 明 做 如 下 完善 : 若 在 
投 币 n( 如 10) 秒 后 仍 没 选择 饮料 ,自动 售 货 机 上 “请 选择 饮料 ”的 灯亮 ,请 根据 规格 说 明 改 


进 因果 图 和 判定 表 。 


10. 表 3-19 和 表 3-20 是 对 某 IC 卡 加 油 机 应 用 系统 的 基本 流 和 备 选 流 描述 , 试 回答 


问题 (1) 一 (3) 。 


表 3-19 基本 流 
序号 用 例 名 称 用 例 描 述 
Al 准备 加 油 客户 将 IC 加 油 卡 插入 加 油 机 
二 验证 加 油 卡 加 油 机 从 加 油 卡 的 磁 条 中 读 取 账户 代码 ,并 检查 它 是 否 属 于 可 以 接收 
的 加 油 卡 
A3 验证 黑 名 单 加 油 机 验证 卡 账 户 是 否 存在 于 黑 名 单 中 ,如 果 属 于 黑 名 单 , 加 油 机 甜 卡 
A4 输入 购 油 量 客户 输入 需要 购买 的 汽油 数量 
A5 加 油 加 油 机 完成 加 油 操作 ,从 加 油 卡 中 扣除 相应 金额 
A6 返回 加 油 卡 ”| 退还 加 油 卡 
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表 3-20 备 选 流 
序号 用 例 名 称 用 例 描 述 


流 A2 过 程 中 ， K 能 够 识别 下 论 
. 加 油 卡 无 效 和 竺 各 该 卡 不 能 够 识别 或 是 非 本 机 可 以 使 用 的 
卡 ,加油 机 退 卡 ,并 退出 基本 流 


在 基本 流 A3 过 程 中 ,判断 该 卡 账户 属于 黑 名 单 。 例 如 已 经 挂失 ， 


C 卡 账户 属于 黑 名 单 


加 油 机 吞 卡 退 出 基本 流 
D 加 油 卡 账面 现金 不 足 系统 判断 加 油 卡 内 现金 不 足 , 重 新 加 入 基本 流 A4, 或 选择 退 卡 
加 油 机 油 量 不 足 系统 判断 加 油 机 内 油 量 不 足 , 重 新 加 入 基本 流 A4, 或 选择 退 卡 


(1) 使 用 场景 法 设计 测试 用 例 , 指 出 场景 涉及 的 基本 流 和 备 选 流 ,基本 流 和 备 选 流 用 
表 中 描述 的 相应 字母 表示 。 

(2) 对 每 一 个 场景 都 需要 确定 测试 用 例 。 

根据 表 3-21 所 示 的 通用 格式 (可 参见 3. 3.7 小 节 对 表 3-15 的 介绍 ) ,首先 确定 执行 用 
例 场 景 所 需 数据 元 素 (本 例 中 包括 账号 是否 黑 名 单 卡 、 输 入 油 量 、 账 户 金额 加油 机 油 
量 ) ,然后 构建 测试 用 例 表 , 最 后 确定 包含 执行 场景 所 需 的 适当 条 件 的 测试 用 例 。 

在 表 3-21 中 ,V 表示 有 效 数据 元 素 ,I 表示 无 效 数据 元 素 ,n/a 表示 不 适用 。 例 如 ， 
C01 表示 “成 功 加 油 ” 基 本 流 。 请 按 上 述 规定 为 其 他 应 用 场景 设计 测试 用 例 。 


表 3-21 测试 用 例 表 


测试 用 例 是 否 黑 加 油 
号 < 面 预期 结 
ID 号 场景 账 名 单 卡 输入 油 量 | 账面 金额 机 酒量 预期 结果 
C01 “| 场景 1: 成 功 加 油 V V V V 成 功 加 油 


C02 


C03 


Co4 


C05 


(3) 假如 每 升 油 4 元 人 民 币 , 用 户 的 账户 金额 为 1000 元 ,加 油 机 内 油 量 足 够 ,那么 在 
A4 输入 油 量 的 过 程 中 ,请 运用 边界 值 分 析 方法 为 A4 选取 合适 的 输入 数据 ( 即 油 量 , 单 
往生) 


有 
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白 盒 测试 方法 
本 章 要 点 : 
。 白 盒 测试 的 含义 。 
。 白 盒 测试 无 法 实现 穷 举 测试 的 原因 。 
。 和 白 盒 测试 的 优点 和 局 限 性 。 


白 盒 测试 中 的 静态 测试 和 动态 测试 。 
逻辑 覆盖 法 、 基 本 路 径 测试 和 控制 结构 测试 。 
白 盒 测试 方法 的 综合 使 用 策略 。 


在 这 一 章 中 将 介绍 白 盒 测试 方法 的 概念 和 特点 ,以 及 典型 的 白 盒 测 试 方法 ,主要 包括 
代码 检查 ,静态 结构 分 析 ,代码 质量 度量 .逻辑 覆盖 法 、 基 本 路 径 测 试 .控制 结构 测试 ,程序 
插 桩 等 ,最 后 介绍 了 白 盒 测 试 方法 的 综合 使 用 策略 ,并 对 黑 盒 和 白 盒 测试 方法 进行 了 最 后 
的 总 结 。 

4.1 和 白 盒 测试 方法 概述 
4.1.1 白 盒 测试 的 概念 

白 盒 测试 (White-box Testing) 也 称 结构 测试 .逻辑 驱动 测试 或 基于 程序 本 身 的 测 
试 。“ 白 盒 " 将 程序 形象 地 比喻 为 放 在 一 个 透明 的 盒子 里 , 故 测 试 人 员 是 了 解 被 测 程序 的 
内 部 结构 的 。 测 试 人 员 利 用 程序 的 内 部 逻辑 结构 和 相关 信息 ,对 程序 的 内 部 结构 和 路 径 
进行 测试 ,检验 其 是 否 达到 了 预期 的 设计 要 求 。 白 盒 测试 是 从 程序 设计 者 的 角度 进行 的 
测试 。 

白 盒 测 试 方法 和 黑 盒 测 试 方法 一 样 ,也 不 能 做 到 穷 举 测 试 。 这 是 由 为 程序 的 结构 往 
往 是 复杂 的 ,程序 中 很 难 完全 不 出 现 选择 结构 和 循环 结构 , 当 程 序 中 出 现 了 选择 结构 和 循 
环 结构 ,会 使 程序 中 的 路 径 数目 大 大 增加 ,如 果 选 择 结构 自身 、 选 择 结构 与 循环 结构 ,循环 
结构 自身 会 再 出 现 嵌 套 , 路 径 数 则 更 是 急剧 增加 。 所 以 白 盒 测 试 若 要 覆盖 程序 中 如 天 文 
数字 般 的 全 部 路 径 ,花费 的 时 间 和 代价 几乎 是 所 有 的 测试 项 目 所 不 允许 的 。 

因此 ,和 白 盒 测试 是 一 项 技术 含量 很 高 的 工作 ,测试 人 员 采 用 和 白 盒 测试 方法 设计 测试 用 
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例 时 ,必须 在 仔细 研究 程序 内 部 结构 的 基础 上 ,从 数量 极 大 的 可 用 测试 用 例 中 精心 挑选 尽 
可 能 少 的 测试 用 例 ,来 覆盖 程序 的 内 部 结构 。 


4.1.2 和 白 盒 测试 的 优点 和 局 限 性 


1. 自 盒 测试 的 优点 
与 黑 盒 测试 相 比 , 白 盒 测试 深入 到 程序 的 内 部 进行 测试 ,更 易于 定位 错误 的 原因 和 具 
体位 置 ,弥补 了 黑 盒 测试 只 能 从 程序 外 部 进行 测试 的 不 足 。 


2. 和 白 盒 测试 的 局 限 性 

即使 白 盒 测试 覆盖 了 程序 中 的 所 有 路 径 , 仍 不 一 定 能 发 现 程序 中 的 全 部 错误 ,这 是 由 
白 盒 测试 的 局 限 性 所 致 。 

。 白 盒 测试 不 能 查 出 程序 中 的 设计 缺陷 。 

。 白 盒 测试 不 能 查 出 程序 是 否 遗漏 了 功能 或 路 径 。 

。 白 盒 测试 可 能 发 现 不 了 一 些 与 数据 相关 的 错误 。 
4.1.3 和 白 盒 测试 方法 的 分 类 

白 盒 测 试 分 为 静态 测试 (Static Testing) 和 动态 测试 (Dynamic Testing) 两 大 类 。 

静态 测试 不 需要 实际 执行 程序 ,静态 测试 的 主要 目的 是 检查 软件 的 表示 和 描述 是 否 
一 致 ,是 否 存 在 冲突 和 歧义 。 静 态 测试 可 以 由 人 工 执 行 , 也 可 以 借助 自动 化 工具 完成 。 

动态 测试 需要 实际 运行 测试 用 例 , 以 发 现 软件 中 的 错误 。 白 盒 测试 中 的 动态 测试 主 
要 包括 功能 确认 与 接口 测试 ,覆盖 率 测试 .性 能 分 析 、 内 存 分 析 等 。 

(1) 功能 确认 与 接口 测试 

功能 确认 与 接口 测试 主要 用 于 测试 各 个 单元 能 否 完成 指定 的 功能 ,以 及 单元 间 的 接 
口 是 否 正确 。 测 试 的 对 象 包括 局 部 数据 结构 、 重 要 的 执行 路 径 、 错 误 处 理 路 径 、 单 元 接口 
和 影响 上 述 几 点 的 边界 条 件 等 。 

(2) 覆盖 率 测试 

履 盖 率 测 试 关 注 的 是 测试 用 例 对 程序 中 可 执行 路 径 的 覆盖 范围 ,常用 的 覆盖 标准 包 
括 语句 覆盖 .判定 覆盖 .条件 覆 盖 .判定 一 条 件 覆 盖 ,条件 组 合 覆 盖 .基本 路 径 覆 盖 等 。 为 
判断 测试 用 例 对 代码 的 覆盖 是 否 达到 指定 的 覆盖 标准 ,一 般 还 应 在 执行 测试 之 后 对 覆盖 
率 进行 统计 ,进而 针对 未 覆盖 的 部 分 补充 测试 用 例 。 

(3) 性 能 分 析 

代码 运行 是 否 缓慢 是 开发 过 程 中 需要 注重 的 一 个 重要 的 性 能 问题 。 若 不 能 解决 此 问 
题 ,将 极 大 地 影响 应 用 程序 的 质量 ,应 查找 到 影响 程序 性 能 的 瓶颈 并 解决 之 。 目 前 ,性 能 
分 析 工 具 大 致 分 为 纯 软 件 的 测试 工具 、 纯 硬件 的 测试 工具 (如 逻辑 分 析 仪 和 仿真 器 等 ) 和 
软 硬 件 结合 的 测试 工具 三 类 。 

(4) 内 存 分 析 

内 存 泄 漏 会 导致 系统 运行 的 崩溃 。 通 过 测量 内 存 的 使 用 情况 ,可 以 了 解 程序 内 存 分 
配 的 真实 情况 ,发 现 对 内 存 的 不 正常 使 用 ,在 问题 出 现 前 发 现 征兆 ,并 精确 显示 发 生 错 误 
时 的 上 下 文 情况 。 


a 
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4.2 典型 的 白 盒 测 试 方法 


这 一 节 将 要 介绍 的 白 盒 测 试 方法 中 的 代码 检查 法 .静态 结构 分 析 法 和 代码 质量 度量 
法 属于 静态 测试 方法 ,而 逻辑 覆盖 法 .基本 路 径 测试 法 、 控 制 结构 测试 和 程序 插 桩 则 属于 
动态 测试 方法 。 
4.2.1 代码 检查 法 

代码 检查 包括 桌面 检查 .代码 审查 和 走 查 等 。 代 码 检查 主要 检查 代码 和 设计 的 一 臻 
性 ,代码 是 否 遵循 标准 ,代码 的 可 读 性 :代码 的 逻辑 正确 性 ,代码 结构 的 合理 性 等 。 代 码 检 
查 可 以 发 现 违背 程序 编写 标准 的 问题 及 程序 中 不 安全 ,不 明确 和 模糊 的 部 分 , 找 出 程序 中 
不 可 移植 部 分 .违背 程序 编程 风格 的 问题 ,包括 变量 检查 .命名 和 类 型 审查 ,程序 逻辑 审 
查 ,程序 语法 检查 和 程序 结构 检查 等 内 容 。 

代码 检查 所 发 现 的 是 问题 本 身 而 非 征兆 。 在 实际 使 用 中 ,代码 检查 是 一 种 有 效 的 测 
试 手段 ,能 发 现 30%% 一 70 儿 的 多 辑 设 计 和 编码 缺陷 。 但 是 代码 检查 也 是 一 项 较为 费时 的 
工作 ,而 且 代 码 检查 需要 编程 及 测试 方面 知识 ` 经 验 的 积累 。 

代码 检查 应 在 编译 和 动态 测试 之 前 进行 ,并 且 应 尽早 进行 , 若 等 到 编码 快 结束 或 已 结 
束 时 再 进行 代码 检查 ,修复 一 个 错误 往往 会 引起 一 系列 变更 ,付出 较 大 的 代价 。 在 进行 代 
码 检查 前 ,应 准备 好 需求 规格 说 明 书 、 设 计 规 格 说明 书 ,程序 源 代码 清单 .编码 标准 和 代码 
缺陷 检查 表 等 资料 ;进行 代码 检查 的 人 员 应 认真 研读 这 些 资料 ,以 提高 代码 检查 的 效率 。 

下 面 分 别 介绍 代码 检查 的 3 种 形式 : 桌面 检查 、 代 码 审 查 和 走 查 。 

1， 桌面 检查 

桌面 检查 (Desktop Checking) 是 一 种 传统 的 检查 方法 ,由 编程 人 员 检查 自己 编写 的 
程序 。 编 程 人 员 对 自己 编写 的 源 代码 进行 分 析 、 检 验 ,甚至 人 工 执 行 代码 ,以 尽 可 能 地 发 
现 程 序 中 的 错误 。 

由 于 编程 人 员 熟 悉 自 己 的 编程 思路 和 程序 逻辑 结构 , 故 桌面 检查 可 以 节省 检查 时 间 。 
但 也 正 是 因为 检查 自己 的 程序 ,有 时 会 跳 不 出 自己 的 思维 框架 ,难以 发 现 程序 中 的 潜在 问 
题 , 应 注意 防止 这 种 倾向 。 


2. 代码 审查 

代码 审查 (Code Inspection) 是 由 程序 的 编写 者 .其 他 编程 人 员 和 测试 人 员 共 同 完 
成 的 。 

在 代码 审查 之 前 ,审查 小 组 负责 人 将 设计 规格 说 明 书 、 程 序 清单 及 编码 规范 等 分 发 给 
小 组 成 员 ,作为 审查 的 依据 。 特 别 是 要 给 小 组 每 个 成 员 一 份 常见 错误 清单 ,也 称 为 缺陷 检 
查 表 , 它 罗列 了 以 往 编程 中 的 常见 错误 ,并 对 错误 进行 了 分 类 。 

审查 小 组 成 员 在 仔细 研读 以 上 材料 后 ,进入 正式 的 审查 过 程 , 即 召 开 代码 审查 会 。 在 
会 上 ,编程 人 员 对 自己 编写 的 程序 , 逐 句 讲解 其 中 的 逻辑 ,审查 小 组 其 他 成 员 则 可 以 提出 
各 自 的 疑问 ,进而 展开 讨论 ,以 确认 错误 是 否 存 在 。 

大 量 实践 表明 ,编程 人 员 在 讲解 自 编程 序 的 过 程 中 ,更 易于 发 现 原先 未 发 现 的 问题 ， 
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而 小 组 所 有 成 员 的 共同 讨论 ,也 有 利于 错误 的 暴露 ,甚至 发 现 一 系列 连带 问题 ,从 而 大 大 
提高 软件 的 质量 。 

3. 走 查 

走 查 (Walkthrough) 与 代码 审查 的 步骤 基本 相同 。 在 进行 走 查 之 前 , 走 查 小 组 的 成 
员 也 会 得 到 设计 规格 说 明 书 、 程 序 清单 .编码 规范 等 与 被 测 程序 相关 的 资料 , 走 查 小 组 的 
成 员 应 充分 研读 这 些 资料 。 在 走 查 的 过 程 中 ,与 代码 审查 不 同 的 是 ,小 组 成 员 不 再 简单 地 
逐一 分 析 程 序 的 逻辑 ,而 是 由 走 查 小 组 中 的 测试 人 员 设计 一 批 有 代表 性 的 测试 用 例 , 走 查 
小 组 的 成 员 则 集体 扮演 计算 机 的 角色 ,在 头脑 中 沿 着 程序 的 逻辑 运行 这 些 测 试用 例 ,将 程 
序 运 行 的 踪迹 记录 于 纸 上 或 黑板 上 供 大 家 分 析 和 讨论 ,进而 检查 其 执行 逻辑 、 控 制 模型 、 
算法 和 使 用 参数 与 数据 的 正确 性 ,以 发 现 设 计 中 存在 的 问题 ,以 及 设计 与 编码 不 一 臻 
之 处 。 
4.2.2 静态 结构 分 析 法 

静态 结构 分 析 主 要 是 以 图 形 的 方式 表现 程序 的 内 部 结构 , 供 测试 人 员 对 程序 结构 进 
行 分 析 。 

在 静态 结构 分 析 中 ,测试 人 员 通 过 使 用 测试 工具 分 析 程 序 源 代码 的 系统 结构 ,数据 结 
构 数据 接口 、 内 部 控制 逻辑 等 内 部 结构 ,生成 函数 调用 关系 图 、 模 块 控制 流 图 、 内 部 文件 
调用 关系 图 . 子 程序 表 、 安 和 函数 参数 表 等 各 类 图 形 图 表 , 以 清晰 地 表示 程序 的 内 部 结构 ， 
供 测 试 人 员 对 其 进行 分 析 , 进 而 查找 程序 中 的 错误 。 

静态 结构 分 析 法 在 此 不 加 详 述 ,读者 可 参阅 其 他 资料 。 
4.2.3 代码 质量 度量 法 

根据 ISO/IEC 9126 国际 标准 的 定义 ,软件 质量 包括 以 下 6 个 方面 : 
功能 性 (functionality) ; 

。 可 靠 性 (Creliability) ; 

。 可 用 性 (usability); 

。 效率 (efficiency); 

。 可 维护 性 (maintainability); 

。 可 移植 性 (portability) 。 

根据 ISO 9126 质量 模型 ,可 以 构造 软件 的 静态 质量 度量 模型 ,通过 量化 的 数据 评估 
被 测 程序 的 质量 。 
4.2.4 逻辑 覆盖 法 

逻辑 覆盖 法 (Logic-coverage Testing) 是 以 程序 内 部 的 逻辑 结构 为 基础 设计 测试 用 例 
的 方法 。 根 据 对 程序 内 部 逻辑 结构 的 覆盖 程度 ,人 逻辑 覆盖 法 具有 不 同 的 覆盖 标准 : 语句 
覆盖 .判定 覆盖 .条 件 覆 盖 .判定 一 条 件 覆 盖 、. 条 件 组 合 覆 盖 和 修正 条 件 判 定 履 盖 。 

1. 语句 覆盖 

语句 覆盖 (Statement Coverage) 的 含义 是 ,设计 足够 多 的 测试 用 例 ,使 被 测 程序 中 的 
每 条 可 执行 语句 至 少 执行 一 次 。 语 名 覆盖 也 称 为 点 覆盖 。 
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图 4-1 是 一 个 被 测 程序 的 流程 图 。 
对 图 4-1 表示 的 程序 , 若 要 做 到 语句 覆盖 , 程 


入 口 js 
序 的 执行 路 径 应 是 sacbed, 为 此 可 设计 如 下 的 > 
测试 用 例 ( 注 意 : A,B,X 的 值 这 里 为 输入 值 ,严格 (A> DNB-0) > 工 X=XA le 
说 来 ,测试 用 例 还 应 包括 预期 输出 ,此 处 省 略 ， 

一 | 

b 


下 同 ) : 
A=2, B=0, X=4 


T 


(A=2)V (X> 1) > X=X+1 le 
语句 覆盖 是 一 种 很 弱 的 逻辑 覆盖 标准 , 它 对 
程序 的 逻辑 覆盖 很 少 。 对 图 4-1 表示 的 源 程 序 ， 了 
语句 覆盖 只 履 盖 了 两 个 判断 均 为 真 的 情况 , 若 某 (Eo 
个 判定 的 结果 为 假 , 则 对 应 的 操作 有 错 也 不 可 能 。 向 4 如 补 测 程序 流程 


通过 语句 覆盖 发 现 ;此 外 ,语句 覆盖 只 关心 判定 的 

结果 ,而 没有 考虑 判定 中 的 条 件 ( 注 意 本 小 结 中 的 条 件 均 指 简单 条 件 ) 及 条 件 之 间 的 逻辑 
关系 。 例 如 若 在 图 4-1 中 将 第 一 个 判定 中 的 符号 人 错 写 为 V ,或 将 第 二 个 判定 中 的 X 二 1 
错 写 为 X 二 1, 则 也 不 可 能 被 A==2,B==0,X=4 这 一 组 测试 用 例 发 现 。 


2. 判定 覆盖 

判定 覆盖 (Decision Coverage) 的 含义 是 ,设计 足够 多 的 测试 用 例 ,使 被 测 程序 中 的 每 
个 判定 取 到 每 种 可 能 的 结果 , 即 履 盖 每 个 判定 的 所 有 分 支 。 故 判定 覆盖 也 称 为 分 支 覆 盖 。 
显然 , 若 实 现 了 判定 覆盖 , 则 必然 实现 了 语句 覆盖 , 故 判定 覆盖 是 一 种 强 于 语句 覆盖 的 覆 
盖 标 准 。 

对 图 4-1 表示 的 源 程序 , 若 要 实现 判定 覆盖 , 则 需 覆 盖 sacbed 和 sabd 两 条 路 径 ,或 覆 
盖 sacbd 和 sabed 两 条 路 径 , 可 设计 如 下 两 组 测试 用 例 : 

A 二 3,B 二 0,X 二 3( 覆 盖 路 径 sacbd) 

A 二 2,B 二 1,X 二 1( 莉 盖 路 径 sabed) 

判定 覆盖 对 程序 的 逻辑 覆盖 程度 仍 不 高 ,图 4-1 表示 的 源 程序 有 4 条 路 径 ,但 以 上 的 
测试 用 例 只 覆盖 了 其 中 的 两 条 。 


3. 条 件 覆盖 

条 件 覆 六 (Condition Coverage) 的 含义 是 ,设计 足够 多 的 测试 用 例 , 使 被 测 程序 中 的 
每 个 条 件 取 到 各 种 可 能 的 结果 。 

对 图 4-1 表示 的 源 程序 ,考虑 包含 在 两 个 判定 中 的 4 个 条 件 , 每 个 条 件 均 可 取 真 假 两 
种 值 。 若 要 实现 条 件 覆 盖 , 应 使 以 下 8 种 结果 成 立 : 

| 
这 8 种 结果 的 前 4 种 是 在 a 点 出 现 的 ,而 后 4 种 是 在 b 点 出 现 的 。 

为 了 覆盖 这 8 种 结果 ,可 设计 如 下 两 组 测试 用 例 : 

A 一 2,B 一 0,X 一 4( 覆 盖 A 之 1,B 二 0,A 二 2,X 放 1, 执 行路 径 sacbed) 

A 王 1,B 王 1,X 一 1( 覆 盖 A 二 1,B 关 0,A 关 2,X 一 1, 执行 路 径 sabd) 

条 件 覆 盖 一 般 比 判定 覆盖 强 , 因 为 条 件 覆 盖 关 心 判定 中 每 个 条 件 的 取 值 ,而 判定 覆盖 
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只 关心 整个 判定 的 取 值 。 也 就 是 说 , 若 实现 了 条 件 履 盖 , 则 也 实现 了 判定 覆盖 ,如 上 述 两 
组 测试 用 例 也 实现 了 判定 覆盖 。 但 这 不 是 绝对 的 , 某 些 情 况 下 ,也 会 有 实现 了 条 件 覆 盖 却 
未 能 实现 判定 覆盖 的 情形 。 例 如 下 面 两 组 测试 用 例 

A 王 2,B 王 0,X 王 1( 覆 盖 A 之 1,B 王 0,A 王 2.X 一 1, 执行 路 径 sacbed) 

A 二 1,B= 二 1,X 二 2( 覆 盖 A 二 1,B 关 0,A 隐 2,X 之 1, 执行 路 径 sabed) 
此 两 组 测试 用 例 均 使 图 4-1 中 第 二 个 判定 取 值 为 真 ,而 未 覆盖 到 第 二 个 判定 取 值 为 假 的 
情况 。 

其 至 可 能 出 现 这 样 的 情况 ,对 某 被 测 程序 实现 了 条 件 覆 盖 却 未 实现 语句 覆盖 ,读者 可 
自行 举例 。 

4. 判定 一 条 件 覆 盖 

既然 实现 了 判定 覆盖 不 一 定 能 够 实现 条 件 覆 盖 ,而 实现 了 条 件 覆 盖 也 不 一 定 能 够 实 
现 判 定 覆 盖 , 故 可 设计 更 高 的 多 辑 履 盖 标 准将 两 者 兼顾 起 来 ,这 就 是 判定 一 条 件 覆 盖 。 

判定 一 条 件 覆 盖 的 含义 是 ,设计 足够 多 的 测试 用 例 ,使 被 测 程序 中 的 每 个 条 件 取 到 各 
种 可 能 的 结果 , 且 每 个 判定 取 到 各 种 可 能 的 结果 ; 若 实现 了 判定 一 条 件 覆 盖 , 则 必然 实现 
了 判定 覆盖 和 条 件 覆 盖 。 

对 图 4-1 表示 的 源 程序 , 若 要 实现 判定 一 条 件 覆 盖 , 可 设计 如 下 两 组 测试 用 例 ， 

A 二 2,B=0,X 二 4( 覆 盖 A>1,B=0,A 王 2,X>>1, 执 行路 径 sacbed) 

A=1,B=1,X=1( 覆 盖 A==1,B 承 0,A 关 2,X 二 1, 执 行路 径 sabd) 

实际 上 ,这 两 组 测试 用 例 就 是 先前 我 们 为 实现 条 件 覆 盖 而 设计 的 两 组 测试 用 例 。 


5. 条 件 组 合 覆盖 

当 某 个 判定 中 存在 多 个 条 件 时 ,仅仅 考虑 单个 条 件 的 取 值 是 不 够 的 。 条 件 组 合 巴 盖 
的 含义 是 ,设计 足够 多 的 测试 用 例 ,使 被 测 程序 中 每 个 判定 的 所 有 条 件 取 值 组 合 都 至 少 出 
现 一 次 。 

对 图 4-1 表示 的 源 程序 ,车 要 实现 条 件 组 合 覆 盖 , 应 使 如 下 8 种 条 件 取 值 组 合 至 少 出 


现 一 次 : 
©@ A>1,B=0 © A>1,Bz#0 
©® A=1,B=0 @ A=1,B#0 
© A=2,X>1 © A=2,X=1 
©® Az2,X>1 ©® Azz2,X=1 


以 上 8 种 组 合 中 ,前 4 种 组 合 是 图 4-1 中 第 一 个 判定 的 条 件 取 值 组 合 ,后 4 种 组 合 则 
是 第 二 个 判定 的 条 件 取 值 组 合 。 

为 覆盖 此 8 种 组 合 ,可 设计 如 下 的 4 组 测试 用 例 : 

A 二 2,B 二 0,X 二 4( 覆 羡 外 、@ 两 种 组 合 . 执 行路 径 sacbed) 

A 二 2,B 二 1,X 二 1( 宪 盖 @、@ 两 种 组 合 ,执行 路 径 sabed) 

A 王 1,B 王 0,X 一 2( 覆 盖 @ .OO 两 种 组 合 .执行 路 径 sabed) 

A 二 1,B 二 1,X 二 1( 有 覆盖 @@、@ 两 种 组 合 ,执行 路 径 sabd) 

对 某 被 测 程序 , 若 实现 了 条 件 组 合 覆 盖 , 则 一 定 实现 了 判定 覆盖 .条件 覆 盖 及 判定 一 
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条 件 覆 盖 。 但 条 件 组 合 覆 盖 不 一 定 能 覆盖 程序 中 的 每 条 路 径 , 如 上 述 4 组 测试 用 例 就 没 
有 覆盖 到 图 4-1 所 示 源 程序 中 的 路 径 sacbd。 


6. 修正 条 件 判定 覆盖 

修正 条 件 判定 覆盖 是 由 欧美 的 航空 /航天 制造 厂商 和 使 用 单位 联合 制定 的 “航空 运输 
和 装备 系统 软件 认证 标准 ”, 目 前 在 国外 的 国防 、 航 空 .航天 领域 应 用 广泛 。 这 个 覆盖 度量 
需要 足够 的 测试 用 例 来 确定 各 个 条 件 是 否 能 够 影响 到 包含 的 判定 的 结果 。 它 要 求 满足 两 
个 条 件 : 首先 ,每 一 个 程序 模块 的 入 口 和 出 口 点 都 要 至 少 被 调用 一 次 ,每 个 程序 的 判定 到 
所 有 可 能 的 结果 值 要 至 少 转换 一 次 ;其 次 ,程序 的 判定 被 分 解 为 通过 逻辑 操作 符 (AND， 
OR) 连 接 的 布尔 条 件 , 每 个 条 件 对 于 判定 的 结果 值 是 独立 的 。 

实现 修正 条 件 判定 覆盖 ,需要 付出 极 大 的 成 本 (通常 能 够 支持 修正 条 件 判定 覆盖 的 测 
试 工具 价格 极其 昂贵 ) 。 

读者 可 思考 ,为 实现 修正 条 件 判定 覆盖 ,如 何 对 图 4-1 表示 的 源 程序 设计 测试 用 例 。 


4.2.5 基本 路 径 测试 法 


1. 基本 路 径 测试 的 概念 

图 4-1 所 示 源 程序 共有 4 条 路 径 , 若 要 覆盖 此 4 条 路 径 , 可 设计 如 下 4 组 测试 用 例 : 

A 二 2,B= 二 0,X 二 4( 覆 盖 路 径 sacbed) 

A 二 2,B 二 1,X 二 1( 窗 盖 路 径 sabed) 

A=1,B=1,X=1( 柳 盖 路 径 sabd) 

A 王 3,B=0,X=1( 覆 盖 路 径 sacbd) 

但 必须 看 到 ,图 4-1 所 示 源 程序 是 一 个 极 简单 的 程序 ,大 多 数 情况 下 ,由 于 程序 中 选 
择 结构 和 循环 结构 的 存在 ,使 得 测试 程序 中 的 每 一 条 路 径 是 现实 不 允许 的 事情 。 故 必须 
将 测试 的 路 径 数目 压缩 到 一 定 范围 内 ,基本 路 径 测试 (Basic Path Testing) 就 是 这 样 的 一 
种 测试 。 它 在 程序 的 流 图 基础 上 ,确定 程序 的 环 路 复杂 性 ,导出 基本 路 径 的 集合 ,进而 在 
其 基础 上 设计 测试 用 例 ,这些 测 试用 例 能 覆盖 到 程序 中 的 每 条 可 执行 语句 。 基 本 路 径 测 
试 法 也 可 认为 是 逻辑 覆盖 法 的 一 种 覆盖 标准 。 

2. 流 图 

流 图 也 称 为 程序 图 , 它 将 流程 图 中 的 结构 化 构件 改 用 一 般 有 向 图 的 表示 形式 ,如 
图 4-2 所 示 。 


下 选择 结构 WHILE 型 循环 UNTIL 型 循环 ”CASE 多 分 支 结构 
图 4-2 结构 化 构件 在 流 图 中 的 表示 形式 


在 图 4-2 中 ,每 个 圆圈 代表 一 个 结 点 ,表示 源 程 序 或 PDL (Procedure Design 
Language, 过 程 设计 语言 ) 中 的 一 pr 
例如 ,图 4-3(a) 所 示 的 流程 图 (假设 每 个 判断 均 不 含 复合 条 件 ), 它 所 对 应 的 流 图 如 
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4-3(b) 所 示 。 


(a) 流程 图 (b) 流 图 
图 4-3 流程 图 和 对 应 的 流 图 


流 图 中 用 谓词 结 点 来 表示 简单 条 件 判断 , 即 谓词 结 点 不 允许 含有 复合 条 件 。 对 于 程 
序 ( 或 流程 图 ) 中 的 复合 条 件 ,应 将 其 转化 为 多 个 简单 条 件 判断 ,在 流 图 中 用 相应 的 谓词 结 

如 图 4-4(a) 所 示 的 流程 图 ,图 中 的 判断 含有 两 个 条 件 , 即 为 复合 条 件 判 断 , 故 将 此 判 
断 在 流 图 中 用 两 个 谓词 结 点 表示 。 图 4-4(a) 流 程 图 对 应 的 流 图 如 图 4-4(b) 所 示 。 


Di 
ee \ 
(B) 


(a) 流程 图 (b) 流 图 
图 4-4 流程 图 及 其 对 应 的 流 图 


3. 程序 的 环 路 复杂 性 

程序 的 环 路 复杂 性 (Cyclomatic Complexity) 又 称 为 圈 复 杂 性 ,其 值 等 于 流 图 中 的 区 
域 个 数 。 在 进行 基本 路 径 测试 时 ,确定 了 程序 的 环 路 复杂 性 , 则 可 在 其 基础 上 确定 程序 基 
本 路 径 集 合 的 独立 路 径 数目 ,这 个 数目 是 确保 程序 中 每 条 可 执行 语句 至 少 执行 一 次 的 测 
试用 例 数 目的 最 小 值 。 

独立 路 径 是 一 条 含有 以 前 未 处 理 的 语句 或 判断 的 路 径 。 在 流 图 中 ,独立 路 径 表 现 为 
至 少 含有 一 条 其 他 独立 路 径 中 均 没有 的 边 的 路 径 。 

图 4-3(b) 所 示 的 流 图 包含 4 个 区 域 , 故 所 对 应 的 程序 的 环 路 复杂 性 度量 V(G) 为 4， 
程序 有 以 下 4 条 独立 路 径 。 

路 径 1: 1 一 11。 

路 径 2: 1 一 2 一 3 一 4 一 5 一 10 一 1 一 11。 


这 


区 
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路 径 3; 1 一 2 一 3 一 6 一 8 一 9 一 10 一 1 一 11。 
路 径 4; 1 一 2 一 3 一 6 一 7 一 9 一 10 一 1 一 11。 
可 由 此 设计 测试 用 例 ,覆盖 以 上 4 条 独立 路 径 , 即 可 使 程序 中 的 所 有 可 执行 语句 和 所 
有 判断 的 真 、. 假 分 支 至 少 执行 一 次 。 
利用 以 下 公式 也 可 以 计算 程序 的 环 路 复杂 性 度量 V(G) : 
V(G)=E—N+2 
式 中 下 为 流 图 中 的 边 数 ,N 为 流 图 中 的 结 点 数 。 如 图 4-3(b) 所 示 的 流 图 中 , 边 数 为 11, 结 
点 数 为 9, 故 V(G)=11 一 9 十 2==4。 
此 外 ,还 可 利用 流 图 中 的 谓词 结 点 数 来 计算 环 路 复杂 性 度量 V(G): 
V(G)=P+1 
式 中 了 为 流 图 中 的 谓词 结 点 数 。 如 图 4-3(b) 所 示 的 流 图 中 ,谓词 结 点 数 为 3, 故 V(G)= 
3 十 1 二 4。 若 能 事先 确定 程序 中 的 简单 条 件 判断 的 个 数 ( 即 等 于 流 图 中 的 谓词 结 点 数 ) , 则 
可 在 不 画 出 流 图 的 情况 下 确定 程序 的 环 路 复杂 性 。 


4. 基本 路 径 测试 范例 

下 面 给 出 了 一 个 利用 基本 路 径 测 试 法 设计 测试 用 例 的 例子 。 

试 以 如 下 PDL 为 基础 ,利用 基本 路 径 测 试 法 设计 测试 用 例 ,该 PDL 代表 的 程序 允许 
最 多 输入 100 个 数 (以 一 999 作为 输入 结束 标志 ) ,统计 有 效 输入 值 ( 即 数值 在 规定 的 最 小 
值 和 最 大 值 之 间 ) 的 平均 值 , 若 有 效 输 入 值 的 个 数 为 0, 则 平均 值 计 为 一 999 。 


PROCEDURE average 
INTERFACE RETURNS average; 
INTERFACE ACCEPTS value, min, max; 
TYPE value[ 1:100] IS SCALAR ARRAY:; 
TYPE average, total. input, total. valid, min.max,sum IS SCALAR:; 
TYPE i IS INTEGER:; 
i=1; 


total. input= total. valid 一 0; 


sum=0; 
DO WHILE value[i]=<>—999 AND total. input=100 
total. input 加 1; 
IF value[i] >=min AND value[i] <=max 
THEN 
total. valid 加 1; 
sum= sum 二 value[i]; 
ELSE skip; 
ENDIF 
i 加 1; 
ENDDO 
IF total. valid>0 
THEN average= sum/ total. valid; 
ELSE average= —999; 
ENDIF 
END average 


第 4 章 自 盒 测试 方法 


此 题 的 完成 步骤 如 下 : 

(1) 根据 PDL 画 出 程序 的 流 图 。 为 画 出 流 图 , 先 为 PDL 中 的 语句 和 判断 编号 ,用 以 
确定 流 图 中 的 结 点 ,对 语句 和 判断 编号 后 的 PDL 如 图 4-5 所 示 ,根据 图 4-5 画 出 的 流 图 如 
图 4-6 所 示 。 


isl; 
total.input=total.valid=0; 
sum=0; 


2 3 
DO WHILE | valueli] <> -999 AND| total.input< 100 


4| totalinput 加 1; 


学 6 
IF | valueli]=min AND | value[i] 三 max 
THEN 
7 total.valid 加 1; 
sum=sum+ value[i]; 
ELSE skip; 
8 ENDIF 
i 加 1; 


9| ENDDO 


F| total.valid> 0 |10 


THEN| average=sum/total.valid; |1 


ELSE | average=—999; | 12 


ENDIF 


巴 


图 4-5 对 语句 和 判断 编号 后 的 PDL 


图 4-6 ”过程 average 的 流 图 


有 
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(2) 确定 程序 的 环 路 复杂 性 。 可 按 以 下 3 种 方法 确定 环 路 复杂 性 。 

g 按 流 图 的 区 域 个 数 计算 : V(G) 二 6。 

@ 按 公式 V(G)=E 一 N 十 2 计算 : V(G) 王 17 一 13 十 2 一 6。 

@ 按 公式 V(G)=P 十 1 计算 : V(G)=5 十 1=6。 

(3) 确定 程序 的 基本 路 径 集合 。 由 于 基本 路 径 集合 中 的 独立 路 径 数目 等 于 程序 的 环 


路 复杂 性 , 故 为 6。 可 确定 如 下 6 条 独立 路 径 。 


路 径 1: 1 一 2 一 10 一 11 一 13 

路 径 2: 1 一 2 一 10 一 12 一 13 

路 径 3: 1 一 2 一 3 一 10 一 11 一 13 

路 径 4: 1 一 2 一 3 一 4 一 5 一 8 一 9 一 2 

路 径 5: 1 一 2 一 3 一 4 一 5 一 6 一 8 一 9 一 2… 

路 径 6: 1 一 2 一 3 一 4 一 5 一 6 一 7 一 8 一 9 一 2… 

路 径 4,5,6 后 的 省 略 号 表示 路 径 中 的 后 续 结 点 对 于 测试 用 例 的 设计 并 不 重要 。 值 得 


注意 的 是 ,对 于 同一 个 程序 ,基本 路 径 集 合 不 是 唯一 的 。 
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明确 谓词 结 点 将 有 助 于 测试 用 例 的 设计 ,图 4-6 中 的 谓词 结 点 为 2,3,5,6,10。 
(4) 设计 测试 用 例 ,使 基本 路 径 集 合 中 的 每 条 独立 路 径 至 少 执行 一 次 。 

可 以 设计 如 下 测试 用 例 。 

测试 用 例 1( 覆 盖 路 径 1 的 测试 用 例 ) 

value[k] 天 一 999 且 至 少 有 一 个 value[kj 是 有 效 输入 值 ,k<i; 
value[i]= 一 999,2<i<100; 

预期 结果 : 正确 计算 出 有 效 输入 值 的 平均 值 。 

测试 用 例 2( 歼 盖 路 径 2 的 测试 用 例 ) 


value[1]=—999; 


预期 结果 : 计算 出 的 平均 值 为 一 999。 

测试 用 例 3( 窗 盖 路 径 3 的 测试 用 例 ) 

试图 输入 101 个 数值 ,前 100 个 数值 均 不 为 一 999 且 至 少 有 一 个 为 有 效 输入 值 ,第 
个 数值 也 不 为 一 999。 

预期 结果 : 正确 计算 出 有 效 输 入 值 的 平均 值 。 

测试 用 例 4( 窗 盖 路 径 4 的 测试 用 例 ) 

value[kj 取 一 999 且 至 少 有 一 个 value[kj 小 于 min,k<i; 

value[i]= —999,2<i<100; 

预期 结果 : 正确 计算 出 平均 值 。 若 有 效 输 入 值 的 个 数 为 0, 则 平均 值 为 一 999。 
测试 用 例 5( 覆 盖 路 径 5 的 测试 用 例 ) 


value[k] 天 一 999 上 且 至 少 有 一 个 value[k] 大 于 max,k 一 ii; 
value[i]=—999,2<i<100; 


预期 结果 : 正确 计算 出 平均 值 。 若 有 效 输入 值 的 个 数 为 0, 则 平均 值 为 一 999。 
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测试 用 例 6( 覆 盖 路 径 6 的 测试 用 例 ) 

value[k] 天 一 999 且 至 少 有 一 个 value[k] 是 有 效 输入 值 ,k 一 i; 

value[i]= 一 999,2<<i100; 

预期 结果 : 正确 计算 出 有 效 输入 值 的 平均 值 。 
4.2.6 控制 结构 测试 

基本 路 径 测试 可 以 认为 是 控制 结构 测试 中 的 一 种 ,下 面 介绍 控制 结构 测试 中 的 一 些 
其 他 测试 策略 。 

1. 分 支 结构 的 路 径 数 的 确定 

当 程 序 中 的 判定 多 于 一 个 时 ,分 支 结构 可 分 为 两 类 : 嵌 套 型 分 支 结 构 和 连锁 型 分 支 
结构 ,如 图 4-7 所 示 。 


(a) 嵌 套 型 分 支 结构 (b) 连锁 型 分 支 结构 
图 4-7 分 支 结构 的 两 种 类 型 


对 于 艇 套 型 分 支 结构 , 若 有 宛 个 判定 语句 ,需要 "十 1 个 测试 用 例 去 覆盖 其 2 十 1 条 路 
径 ; 对 于 连锁 型 分 支 结构 , 若 有 个 判定 语句 , 则 需要 2" 个 测试 用 例 去 覆盖 其 2" 条 路 径 。 
当 n 较 大 时 ,测试 的 工作 量 将 变 得 难以 承受 。 

为 减少 测试 用 例 的 数目 ,可 采用 构造 正 交 表 方 法 选取 部 分 路 径 进行 测试 。 在 假定 各 
条 路 径 的 重要 性 相同 ,或 不 清楚 各 路 径 重 要 性 的 情况 下 ,可 进行 均匀 抽样 ; 若 能 确定 各 路 
径 的 重要 性 , 则 可 通过 对 路 径 进行 加 权 , 从 而 筛选 掉 部 分 路 径 , 再 使 用 均匀 抽样 方法 。 抽 
样 的 具体 步 又 如 下 : 

g@ 设 连锁 型 分 支 结构 中 含有 个 判定 ,计算 满足 关系 式 2 十 1] 委 2” 的 最 小 自然 数 mm。 

Q@ 设 :一 2, 构 造 正 交 表 工 ,。 

@ 利用 正 交 表 L, 选取 测试 路 径 。 

下 面 我 们 来 看 一 个 例子 。 

一 个 连锁 型 分 支 结构 中 有 3 个 判定 语句 P,P; ,Ps , 故 共 有 2 即 8 条 路 径 ,为 减少 测 
试 需 覆盖 的 路 径 数目 ,可 采用 构造 正 交 表 的 方法 选取 部 分 路 径 进 行 测试 ,步骤 如 下 。 


- 


软件 测试 


@ 计算 满足 关系 式 n 十 1 二 2” 的 最 小 自然 数 m。 此 例 中 ,n 二 3, 故 mm 二 2。 
@ 计算 t,t 一 2" 一 4, 构造 正 交 表 L4( 正 交 表 的 构造 过 程 从 略 ,可 参看 相关 书籍 )。 正 
交 表 L, 如 表 4-1 所 示 。 


表 4-1 正 交 表 工 
列 号 
行 号 
1 0 0 0 
1 0 
3 0 1 
4 1 lL 0 


正 交 表 L, 中 的 每 一 列表 示 一 个 判定 ,第 1,2,3 列 分 别 对 应 于 判定 Pi ,P; ,P; ,每 一 行 
为 一 个 可 取 的 测试 用 例 。 

@ 判定 Pi 的 真 , 假 分 支 分 别 记 为 S1,S; ;判定 P, 的 真 , 假 分 支 分 别 记 为 S ,Si ;判定 
Ps 的 真 、 假 分 支 分 别 记 为 S; ,Ss 。 用 判定 的 取 真 分 支 代替 正 交 表 L, 中 的 “1”, 用 判定 的 取 
假 分 支 代替 正 交 表 L, 中 的 0”, 则 确定 了 4 条 测试 路 径 , 正 交 表 Ls 的 第 1,2,3,4 行 代表 
的 测试 用 例 对 应 的 路 径 分 别 为 S1 一 Ss 一 S; ,S; 一 Ss 一 Ss ,Si 一 S1 一 Se ,Ss 一 S1 一 Ss 。 

通过 该 方法 的 运用 ,将 测试 用 例 的 数目 ( 即 为 测试 路 径 的 数目 ) 从 8 减 为 4, 简 化 了 测 
试用 例 的 设计 。 

2. 对 循环 结构 的 测试 

绝 大 多 数 程序 都 要 用 到 循环 结构 ,对 循环 结构 进行 测试 的 目的 是 发 现 循环 结构 中 的 
错误 。 循 环 可 分 为 简单 循环 ` 嵌 套 循环 .并 列 循环 和 非 结 构 循 环 几 种 类 型 ,如 图 4-8 所 示 。 


?一 


Wu 


(a) 简单 循环 (b) 钳 套 循环 (©) 并 列 循环 。 (d) 非 结构 循环 
图 4-8 循环 种 类 


下 面 分 别 讨论 对 每 一 类 循环 的 测试 策略 。 
(1) 对 简单 循环 的 测试 
对 于 循环 次 数 不 大 于 的 简单 循环 ,可 进行 如 下 测试 。 
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J@ 不 执行 循环 。 

@ 执行 一 次 循环 。 

@ 执行 两 次 循环 。 

加 @ 执行 m 次 循环 ,m 二 n。 

@ 执行 n 一 1 次 循环 。 

@ 执行 n 次 循环 。 

@ 执行 n 十 1 次 循环 。 

(2) 对 由 套 循环 的 测试 

若 按照 简单 循环 的 测试 策略 对 艇 套 循 环 进行 测试 ,会 使 测试 次 数 呈 几何 级 数 增长 。 
为 减少 对 艇 套 循环 的 测试 次 数 ,可 使 用 如 下 策略 : 

Q@ 从 最 内 层 循环 开始 测试 ,此 时 所 有 外 层 循环 的 次 数 都 取 最 小 值 ,内 层 循 环 按 简单 
循环 的 测试 策略 进行 测试 。 

@ 从 内 向 外 , 退 到 外 一 层 循环 进行 测试 ,该 层 循环 的 所 有 外 层 循环 次 数 仍 取 最 小 值 ， 
而 该 层 循环 的 内 层 循环 次 数 则 可 取 某 个 典型 值 。 

@ 继续 向 外 扩展 ,对 每 一 个 循环 层次 按 四 中 所 述 方法 进行 测试 ,直至 所 有 循环 层次 
均 被 测试 完 。 

(3) 对 并 列 循环 的 测试 

若 并 列 的 两 个 循环 结构 完全 独立 ,可 使 用 简单 循环 的 测试 策略 ; 若 两 个 循环 结构 不 独 
立 , 如 第 一 个 循环 的 计数 值 作为 第 二 个 循环 的 初 值 , 则 应 使 用 嵌 套 循环 的 测试 策略 。 

(4) 对 非 结 构 循 环 的 测试 

对 于 非 结 构 循 环 , 应 先 将 其 转化 为 结构 化 循环 ,再 使 用 上 述 的 测试 策略 进行 测试 。 

还 有 一 些 测试 策略 也 属于 控制 结构 测试 的 范畴 ,如 对 复合 条 件 的 测试 .数据 流 测试 
等 ,在 此 从 略 , 有 兴趣 的 读者 可 进一步 参看 其 他 资料 。 
4.2.7 程序 插 桩 

程序 插 桩 (Instrumentation) 是 一 种 通过 向 被 测 程序 中 插 和 人 操作 来 发 现 和 定位 错误 的 
方法 ,在 程序 测试 和 调试 (调试 即 在 发 现 程序 存在 运行 错误 以 后 ,寻找 错误 的 原因 和 位 置 
并 排除 错误 ) 中 有 着 广泛 的 应 用 。 

在 测试 或 调试 程序 时 ,常常 需要 在 程序 中 插入 一 些 打印 语句 ,使 其 在 程序 执行 过 程 中 
能 打印 出 我 们 关心 的 信息 ,通过 这 些 信 息 来 了 解 程序 执行 过 程 中 的 动态 特性 ,如 程序 的 实 
际 执行 路 径 ,程序 中 某 语句 的 执行 次 数 , 程 序 中 各 路 径 的 被 覆盖 程度 ,程序 中 某 变量 在 特 
定时 刻 的 值 等 ,这 些 都 是 可 以 通过 程序 持 桩 来 完成 的 。 

下 面 以 计算 整数 X 和 整数 Y 的 最 大 公约 数 的 程序 为 例 ,说 明 程 序 持 桩 方法 的 要 点 。 
计算 整数 X 和 整数 Y 的 最 大 公约 数 的 程序 流程 图 如 图 4-9 所 示 。 

图 4-9 中 的 虚线 框 是 为 了 记录 语句 的 执行 次 数 而 插入 的 ,其 形式 为 

CD) = CD) + i=1,2,.…,6 

程序 从 入 口 开始 执行 到 出 口 结束 执行 ,经 过 的 计数 语句 记录 下 该 程序 点 语句 的 执行 

次 数 。 若 在 程序 的 入 口 处 插入 了 对 计数 器 C(i) 初 始 化 的 语句 ,在 程序 出 口 处 则 插入 打印 
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图 4-9 插 桩 后 的 求 最 大 公 因 数 程序 流程 图 


这 些 计 数 器 的 语句 ,构成 了 一 个 完整 的 搬 桩 程序 。 

5 类 ,到 过 各 二 各 记 星 几 法 , 划 这 大 后 未 仅 节 相遇 疝 - 各 二 二 和 永吉 重 二 允 
据 , 还 能 跟踪 程序 的 执行 流程 ,深入 了 解 程序 执行 过 程 中 的 动态 特性 ,这 使 得 测试 或 调试 
更 富有 成 效 。 

设计 程序 插 桩 方法 时 需要 考虑 如 下 问题 : 

。 应 探测 程序 中 的 哪些 信息 ; 

。 在 程序 的 什么 位 置 设置 探测 点 。 

这 两 个 问题 均 需 要 结合 具体 的 程序 进行 考虑 ,但 对 于 第 二 个 问题 ,有 一 个 准则 对 解决 
问题 有 一 定 的 帮助 , 那 就 是 在 一 般 情况 下 ,在 没有 分 支 结构 的 多 条 连续 语句 构成 的 一 段 程 
序 中 ,只 需 插入 一 个 计数 语句 。 这 样 有 利于 将 探测 点 的 数目 减少 到 最 小 。 当 然 , 若 程 序 中 
出 现 多 种 控制 结构 ,整个 结构 较为 复杂 时 ,应 针对 具体 的 程序 结构 进行 分 析 , 以 确定 在 何 
处 插入 计数 语句 。 


4.3 白 盒 测试 方法 的 综合 使 用 策略 


在 白 盒 测试 中 ,应 灵活 地 使 用 各 种 测试 方法 。 使 用 白 盒 测试 方法 对 软件 进行 测试 的 
综合 策略 如 下 。 

(1) 静态 测试 和 动态 测试 的 时 序 关系 

一 般 可 先进 行 静 态 测试 ,即使 用 代码 检查 法 ,静态 结构 分 析 法 、 代 码 质量 度量 法 等 进 
行 测试 ;接着 进行 动态 测试 ,即使 用 人 逻辑 覆盖 法 、 基 本 路 径 测试 法 ,控制 结构 测试 ,程序 插 
桩 等 方法 进行 测试 。 当 然 , 这 不 是 绝对 的 。 
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(2) 白 盒 测试 的 重点 

履 盖 率 测 试 是 白 盒 测试 的 重点 ,一 般 可 使 用 基本 路 径 测试 方法 使 基本 路 径 集 合 中 的 
每 条 独立 路 径 至 少 执行 一 次 。 对 于 重要 的 程序 模块 ,应 使 用 多 种 覆盖 率 标准 衡量 对 代码 
的 覆盖 率 。 对 于 各 种 覆盖 率 标准 ,读者 可 进一步 参考 其 他 相关 资料 。 

(3) 不 同 测试 阶段 使 用 的 白 盒 测试 方法 

在 不 同 的 测试 阶段 ,使 用 的 白 盒 测 试 方法 不 尽 相同 。 

Q@ 在 单元 测试 阶段 ,以 代码 检查 法 .逻辑 覆盖 法 和 基本 路 径 测试 法 为 主 。 

@ 在 集成 测试 阶段 , 需 增加 静态 结构 分 析 法 和 代码 质量 度量 法 。 

@ 在 集成 测试 之 后 的 测试 阶段 ,应 尽量 使 用 黑 盒 测试 方法 ,但 车 发 现 了 软件 中 的 严 
重 问题 且 无 法 用 黑 盒 测试 方法 定位 , 则 仍 需 选 择 性 地 使 用 白 盒 测试 方法 ,深入 到 模块 的 内 
部 以 定位 错误 。 


4.4 对 黑 盒 白 盒 测试 方法 的 总 结 


通过 第 3 章 和 第 4 章 的 讲述 ,对 黑 盒 测 试 和 白 盒 测试 应 该 有 了 一 个 较为 清楚 的 认识 。 
黑 盒 测 试 和 白 盒 测试 作为 两 种 出 发 点 完全 不 同 的 测试 方法 ,各 有 其 特点 ,在 软件 测试 中 是 
缺 一 不 可 的 。 

黑 盒 测 试 完全 不 考虑 程序 的 具体 实现 过 程 ,从 程序 外 部 对 其 功能 .性 能 等 进行 测试 ， 
故 可 以 认为 是 站 在 用 户 角 度 进 行 的 测试 。 由 于 黑 盒 测试 具有 成 本 较 低 的 优点 ,被 测试 从 
业 人 员 广 泛 采 用 。 

但 黑 盒 测 试 有 其 不 足 之 处 ,如 对 特定 的 输入 ,软件 的 输出 恰巧 是 正确 的 ,但 内 部 的 运 
算 有 错 , 黑 盒 测 试 就 无 法 发 现 ; 还 有 如 软件 中 存在 的 内 存 泄 漏 、. 误 差 累 积 等 隐患 也 是 黑 盒 
测试 无 能 为 力 的 。 

与 黑 盒 测试 相 比 , 白 盒 测试 深入 到 程序 的 内 部 进行 测试 ,能 发 现 比 黑 盒 测 试 更 多 的 错 
误 ,也 更 易于 定位 错误 的 原因 和 具体 位 置 , 并 能 得 出 测试 对 代码 的 覆盖 率 , 弥 补 了 黑 盒 测 
试 只 能 从 程序 外 部 进行 测试 且 难 于 衡量 测试 完整 性 的 不 足 。 

虽然 白 盒 测试 的 优点 很 多 ,但 不 能 对 一 个 测试 项 目 盲目 地 无 限制 地 施用 白 盒 测试 方 
法 ,因为 白 盒 测试 与 黑 盒 测 试 的 方式 虽然 不 同 , 但 在 很 多 场合 ,会 与 黑 盒 测试 产生 同样 的 
效果 ,应 减少 此 类 宛 余 的 测试 ,毕竟 , 白 盒 测试 意味 着 更 多 的 测试 成 本 。 

一 般 说 来 ,在 软件 测试 的 单元 测试 阶段 ,以 使 用 白 盒 测试 法 为 主 对 被 测 单元 进行 测 
试 ;在 集成 测试 阶段 ,可 使 用 黑 盒 . 白 盒 相 结合 的 方法 测试 多 个 单元 组 装 在 一 起 能 和 否 按 预 
期 的 设计 要 求 工 作 , 这 种 测试 策略 也 可 以 理解 为 灰 盒 测试 方法 ;在 集成 测试 之 后 的 测试 阶 
段 ,目标 软件 已 基本 成 型 ,应 使 用 黑 盒 测试 方法 对 软件 进行 测试 。 


4.5 小 结 


本 章 介 绍 了 白 盒 测 试 方法 的 含义 ,及 各 种 典型 的 白 盒 测试 方法 。 白 盒 测试 的 方法 很 
多 ,应 根据 被 测 项 目的 具体 情况 灵活 选择 。 白 盒 测试 作为 一 种 基于 程序 内 部 结构 进行 的 
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A 
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测试 ,涉及 的 理论 很 多 ,在 这 一 章 , 一 些 涉 及 较 深 理论 的 方法 或 准则 被 略 去 了 ,如 域 测试 、 
符号 测试 .Z 路 径 覆 盖 ,程序 变异 等 白 盒 测 试 方法 ,又 如 白 盒 测试 中 的 一 些 测试 覆盖 准则 ， 
以 及 静态 结构 分 析 的 具体 实施 方法 等 ,但 这 不 代表 它们 对 白 盒 测试 是 不 重要 的 ,读者 可 进 
一 步 参阅 相关 资料 。 


习 题 


1. 白 盒 测试 的 含义 是 什么 ”有 何 优 缺 点 ? 
2. 为 何 白 盒 测 试 无 法 实现 穷 举 测试 ? 
3. 白 盒 测试 方法 主要 包括 哪 几 类 ? 
4. 对 某 被 测 程序 , 若 实现 了 条 件 组 合 覆 盖 , 则 一 定 实现 了 判定 覆盖 .条件 覆盖 及 判 
定 一 条 件 履 盖 ,为 什么 ? 
5. 阅读 下 列 代码 (由 C 语言 书写 ) 后 回答 问题 。 
int IsLeap(int year) 
{ 
if (year % 4 三 一 0) 
{ 
if (year % 100 = = 0) 
{ 
if ( year % 400 = = 0) 
leap = 1; 
else 
leap = 0; 
} 
else 
leap = 1; 
} 
else 
leap = 0; 
return leap; 


} 


(1) 画 出 上 述 代码 的 流 图 。 

(2) 计算 上 述 代 码 的 环 路 复杂 性 V(G)。 

(3) 假设 输入 的 取 值 范围 是 1000 二 year 二 2001, 试 用 基本 路 径 测试 法 为 变量 year 设 
计 测 试用 例 ,使 其 满足 基本 路 径 履 盖 的 要 求 。 

6. 程序 插 桩 的 作用 是 什么 ? 

7. 白 盒 测试 方法 的 综合 使 用 策略 是 什么 ? 

8. 在 软件 测试 中 ,应 如 何 将 黑 盒 . 白 盒 测试 方法 结合 起 来 使 用 , 试 谈 谈 你 的 看 法 。 
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本 章 要 点 : 


单元 测试 的 含义 、 目 的 和 优点 。 
单元 测试 使 用 的 方法 。 

单元 测试 的 步骤 。 

单元 测试 环境 。 

驱动 模块 和 桩 模块 的 含义 。 
单元 测试 用 例 的 设计 。 
CppUnit 的 安装 及 环境 配置 。 
CppUnit 的 使 用 步骤 。 


单元 测试 是 软件 测试 中 最 基本 的 一 种 测试 类 型 , 它 能 以 较 高 的 效率 和 较 小 的 成 本 发 
现 软件 中 的 错误 。 在 这 一 章 , 将 介绍 单元 测试 的 基本 概念 ,包括 其 含义 、 目 的 方法、 步 又 
和 环境 等 ,还 将 详细 介绍 单元 测试 的 内 容 及 单元 测试 用 例 的 设计 思路 ,以 及 如 何 用 
CppUnit 进行 单元 测试 。 


5.1 单元 测试 概述 


1. 单元 测试 的 概念 

什么 是 单元 测试 (Unit Testing)? 单元 测试 是 对 软件 基本 组 成 单元 的 测试 。 单 元 的 
具体 含义 是 什么 呢 ? 一 般 认为 ,在 传统 的 结构 化 编程 语言 中 ,比如 C 语言 ,要 进行 测试 的 
单元 一 般 是 模块 ,也 就 是 函数 或 子 过 程 ;在 像 C++ 这 样 的 面向 对 象 的 语言 中 , 要 进行 测 
试 的 基本 单元 是 类 或 类 的 方法 ;对 Ada 语言 来 说 ,开发 人 员 可 以 选择 是 在 独立 的 过 程 和 
函数 ,还 是 在 Ada 包 的 级 别 上 进行 单元 测试 ;单元 测试 的 原则 同样 被 扩展 到 第 四 代 语 言 
(4GL) 的 开发 中 ,在 这 里 基本 单元 往往 对 应 为 一 个 菜单 或 显示 界面 。 

当然 ,在 单元 测试 过 程 中 应 灵活 把 握 单元 的 概念 。 比 如 ,在 对 C 语言 代码 的 单元 测 
试 中 , 若 某 函数 A 仅 被 函数 BB 调用 , 且 渔 数 A 和 函数 B 的 代码 在 一 定 的 范围 内 , 则 可 将 
函数 A 和 函数 B 作为 一 个 被 测 的 单元 ,但 必须 在 单元 测试 方案 中 明确 地 加 以 说 明 。 
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由 于 单元 测试 是 对 单个 被 测 模块 的 测试 , 故 多 个 被 测 模块 之 间 的 单元 测试 可 以 同时 
进行 ,以 提高 单元 测试 的 效率 。 

与 其 他 测试 不 同 , 单 元 测试 可 看 作 是 编码 工作 的 一 部 分 ,一 般 应 该 由 编程 人 员 完 成 ， 
有 时 测试 人 员 也 加 入 进来 ,但 编程 人 员 仍 会 起 到 主要 作用 。 也 就 是 说 ,编程 人 员 有 确保 自 
己 编写 的 软件 单元 准确 的 责任 。 

单元 测试 是 软件 开发 过 程 中 级 别 最 低 的 一 种 测试 ,但 也 是 十 分 重要 的 一 种 测试 。 单 
元 测试 的 依据 是 软件 的 详细 设计 描述 、 源 程序 清单 .编码 标准 等 。 


2. 单元 测试 的 目的 

确保 被 测 单元 的 代码 正确 是 单元 测试 的 主要 目标 。 具 体 说 来 ,单元 测试 的 目的 主要 
包括 如 下 几 方 面 : 

(1) 验证 代码 能 否 达到 详细 设计 的 预期 要 求 。 

(2) 发 现代 码 中 不 符合 编码 规范 的 地 方 。 

(3) 准确 定位 发 现 的 错误 ,以便 排除 错误 。 


3. 单元 测试 的 优点 

一 旦 对 软件 中 各 单元 的 编码 工作 完成 ,开发 人 员 总 是 迫切 地 希望 进行 软件 单元 间 的 
集成 ,这 样 就 能 够 看 到 实际 系统 的 运行 效果 。 但 由 于 要 进行 单元 测试 ,将 推迟 对 整个 软件 
系统 进行 联 调 的 启动 时 间 。 因 而 ,目前 有 一 部 分 人 对 单元 测试 抱 有 偏见 ,认为 单元 测试 浪 
费 了 太 多 的 时 间 , 推 迟 了 系统 的 交付 。 

实际 上 , 若 不 进行 单元 测试 ,或 对 单元 测试 数 衍 了 事 , 各 单元 集成 后 能 够 正常 工作 的 
可 能 性 是 很 小 的 ,将 有 可 能 出 现 各 种 各 样 的 问题 。 事 实 上 ,这 些 问题 往往 不 是 大 的 问题 ， 
大 都 可 以 在 严格 进行 的 单元 测试 阶段 发 现 并 解决 。 但 在 集成 阶段 或 系统 测试 阶段 , 若 要 
定位 并 解决 软件 中 的 这 些 问题 ,会 比 在 单元 测试 阶段 解决 付出 更 大 的 成 本 ,还 很 可 能 造成 
软件 交付 时 间 的 推迟 。 

总 的 说 来 ,单元 测试 的 优点 主要 表现 为 以 下 两 方面 : 

(1) 由 于 单元 测试 是 在 编码 过 程 中 进行 的 , 若 发 现 了 一 个 错误 ,不管 是 从 做 回归 测试 
的 角度 ,还 是 对 错误 原因 理解 的 深刻 性 的 角度 出 发 ,修复 错误 的 成 本 远 小 于 集成 测试 阶 
段 ,更 小 于 系统 测试 阶段 。 

(2) 在 编码 的 过 程 中 考虑 单元 测试 问题 ,有 助 于 编程 人 员 养 成 良好 的 编程 习惯 ,提高 
源 代码 的 质量 。 

基于 单元 测试 具有 的 优点 ,开发 人 员 应 当 高 度 重视 单元 测试 ,有 计划 地 、 严 格 地 对 被 
测 单元 实施 单元 测试 ,以 提高 各 单元 的 质量 ,提高 软件 开发 的 效率 。 

4. 单元 测试 的 测试 方法 

在 单元 测试 阶段 ,应 使 用 白 盒 测试 方法 和 黑 盒 测试 方法 对 被 测 单元 进行 测试 ,其 中 以 
使 用 白 盒 测 试 方法 为 主 。 

单元 测试 阶段 应 使 用 黑 盒 测试 方法 ,从 外 部 接口 处 对 被 测 单元 进行 测试 ,以 验证 其 能 
否 完 成 规格 说 明 中 的 预期 功能 ;在 单元 测试 阶段 还 应 使 用 代码 检查 法 、 人 逻辑 覆盖 法 、 基 本 
路 径 测试 法 等 白 盒 测 试 方法 ,深入 被 测 单元 的 内 部 ,对 被 测 单元 进行 静态 和 动态 测试 ,以 
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验证 代码 是 否 符合 详细 设计 的 要 求 及 一 定 的 编码 规范 。 

在 单元 测试 阶段 以 使 用 白 盒 测 试 方法 为 主 , 是 因为 在 单元 测试 阶段 白 盒 测试 消耗 的 
时 间 、 人 力 ,物力 等 成 本 一 般 会 大 于 黑 盒 测试 的 成 本 ,而 并 不 是 说 黑 盒 测试 在 单元 测试 中 
是 不 重要 的 。 


5.2 单元 测试 的 步 又 


单元 测试 的 实施 应 遵循 一 定 的 步 又 ,力争 做 到 有 计划 、 可 重用 。 

所 谓 单元 测试 的 可 重用 ,是 指 单元 测试 不 仅仅 是 作为 无 错 编 码 的 一 种 辅助 手段 在 一 
次 性 开发 过 程 中 使 用 , 当 软 件 修改 或 移植 到 新 的 运行 环境 时 ,单元 测试 对 应 的 测试 用 例 及 
测试 脚本 ( 即 自动 测试 的 程序 代码 ) 应 可 被 重复 使 用 。 因 此 ,所 有 的 单元 测试 都 必须 在 软 
件 系 统 的 整个 生命 周期 中 进行 维护 。 

单元 测试 的 步骤 如 下 : 

@ 计划 单元 测试 。 确 定 测试 内 容 , 初 步 制定 测试 策略 ,确定 测试 所 用 的 资源 ,安排 测 
试 的 进度 。 

@ 设计 单元 测试 。 创 建 单元 测试 环境 ,制定 测试 方案 , 细 化 测试 过 程 。 

@ 实现 单元 测试 。 编 写 测试 用 例 及 测试 脚本 。 

@ 执行 单元 测试 。 对 被 测 单元 执行 测试 用 例 及 测试 脚本 ,记录 被 测 单元 的 执行 过 程 
和 发 现 的 错误 ,定位 和 排除 错误 。 

@@ 单元 测试 结果 分 析 并 提交 测试 报告 。 对 单元 测试 的 结果 进行 分 析 、 归 类 ,确认 单 
元 测试 是 否 完备 ,并 编制 和 提交 单元 测试 报告 。 


5.3 单元 测试 环境 


单元 测试 中 的 被 测 单元 往往 不 是 一 个 可 以 独立 运行 的 程序 , 故 在 执行 单元 测试 阶段 
的 动态 测试 时 ,应 建立 单元 测试 的 环境 ,使 被 测 模块 能 够 运行 起 来 ,以 达到 对 其 进行 测试 
的 目的 。 在 建立 单元 测试 环境 的 过 程 中 ,人 们 很 可 能 面临 开发 驱动 模块 (Driver) 和 桩 模 
块 (Stub) 的 任务 。 

何谓 驱动 模块 和 桩 模块 ? 驱动 模块 是 用 来 代替 被 测 单 元 的 上 层 模 块 的 。 驱 动 模块 能 
接收 测试 数据 ,调用 被 测 单元 ,也 就 是 将 数据 传递 给 被 测 单元 ,最 后 打印 测试 的 执行 结果 。 
驱动 模块 可 以 理解 为 被 测 单元 的 主 程序 。 

下 面 来 看 一 个 驱动 模块 的 例子 。 

被 测 程序 如 下 。 


int Fun(int in) 


if (in 二 = 0) 
{ 
return 1; 


} 


~、 


return —1; 


} 
用 TCL 脚本 语言 进行 扩展 指令 编写 时 ,针对 该 被 测 函数 ,驱动 程序 如 下 。 


int Ex_TestFun(ClientData clientData,Tcl_Interp * interp, int argcvcharx argv[]) 
{ 

int i; 

int ret, iExceptedRet; 


// 打 开 测 试 结果 记录 文件 
FILE * out; 
out = fopen("D:\\result. txt","a"); 


// 第 1 步 :检查 用 户 输入 参数 个 数 是 否 正 确 
if (3 != argc) 


{ 
{puts("Parameters error" ,out); 
fflush(out); 
return TCL_ERROR:; 

} 

// 第 2 步 :取出 用 户 输入 参数 


if (TCL_OK ! = TclL_GetInt(interp,argv[1],&iD) 
{ 

return TCL_ERROR:; 
} 


if (TCL_OK != Tcl_GetInt(interp,argv[2], &iExceptedRet)) 
{ 

return TCL_ERROR:; 
} 


// 第 3 步 : 将 参数 传递 给 被 测 函 数 


ret = Fun(D); 


// 第 4 步 :将 被 测 函 数 执行 结果 和 输入 的 期 望 结果 进行 比较 ,根据 比较 结果 作为 用 例 执行 结 

果 输 出 到 测试 报告 中 

if (ret ! = iExceptedRet) 

{ 
fputs("test fail" ,out); 
fflush(out); 

} 

else 

{ 
fputs("test success" ,out); 
fflushCout) ; 
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return TCL_OK; 
} 


至 于 桩 模块 ,又 称 为 存根 模块 , 它 用 来 代替 被 测 单元 的 子 模块 。 设 计 桩 模块 的 目的 是 
模拟 实现 被 测 单元 的 接口 。 桩 模块 不 需要 包括 子 模块 的 全 部 功能 ,但 应 做 少量 的 数据 操 
作 , 并 打印 接口 处 的 信息 。 

下 面 来 看 一 个 桩 模块 的 例子 。 

若 被 测 程序 如 下 。 

int Max() 

{ 

int a = funl()， 
intb = fun2(); 
if(a>b) 

return 1; 
else 


return 0; 


} 


则 需要 为 语句 int a = fun10) 和 int b = fun2O 〇 打桩 ,也 就 是 设计 桩 模块 ,模拟 函数 fun1() 和 
fun2() 的 返回 值 。 

由 于 驱动 模块 和 桩 模块 不 是 最 终 可 提交 的 模块 ,因此 人 们 在 进行 单元 测试 时 应 尽量 
避免 开发 驱动 模块 和 桩 模块 。 尤 其 应 避免 开发 桩 模块 ,因为 驱动 模块 开发 的 工作 量 一 般 
少 于 桩 模块 。 其 实 道理 是 显而易见 的 ,驱动 模块 是 用 来 代替 被 测 模块 的 实际 上 层 模 块 的 ， 
只 用 于 完成 调用 被 测 模块 的 工作 ,而 桩 模块 要 做 的 事情 则 要 多 些 。 

若 采 用 自 底 向 上 的 方式 进行 开发 ,底层 的 单元 先 开 发 并 先 测试 ,可 以 避免 开发 桩 模 
块 。 采 用 这 种 方法 测试 上 层 单元 时 ,也 是 对 下 层 单元 的 间接 测试 ,但 当下 层 单元 被 改动 
后 , 则 需要 执行 测试 判断 其 上 层 单元 是 否 需 要 修改 。 

当 不 得 不 开发 驱动 模块 及 桩 模块 时 , 则 应 力求 简单 以 提高 工作 效率 。 但 遗憾 的 是 ,过 
于 简单 的 驱动 模块 和 桩 模块 会 影响 单元 测试 的 有 效 性 ,因而 对 被 测 单元 的 彻底 的 测试 有 
时 会 被 推迟 到 集成 测试 阶段 完 

建立 单元 测试 的 环境 , 需 完 成 以 下 工作 : 

。 构造 最 小 运行 调度 系统 , 即 构造 被 测 单元 的 驱动 模块 ; 

。 模拟 被 测 单元 的 接口 , 即 构造 被 测 单元 调用 的 桩 模块 ; 


。 模 拟 生成 测试 数据 及 状态 ,为 被 测 单元 [而 豆 肌 而 _ -天 开斋 天 | | 刚玉 嫩 训 
运行 准备 动态 环境 。 
单元 测试 环境 可 用 图 5-1 简要 地 表示 。 i 
单元 测试 环境 时 ,不 仅 能 成 功 地 实施 对 被 
测 单元 的 测试 ,还 应 能 提供 对 测试 过 程 的 支持 ， 2 | 
如 对 测试 执行 过 程 的 跟踪 ,测试 结果 的 保留 .对 |_ 桩 模块 桩 模块 桩 模块 


测试 覆盖 率 的 记录 等 。 若 要 得 出 测试 覆盖 率 ， 图 5-1 单元 测试 环境 


A 
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可 事先 提出 测试 应 达到 的 覆盖 标准 以 指导 测试 用 例 的 设计 ,并 采用 程序 持 桩 方法 ,通过 工 
具 对 被 测 单元 进行 插 桩 ,在 执行 测试 后 统计 测试 覆盖 率 。 

单元 测试 结论 的 有 效 性 与 单元 测试 环境 模拟 目标 环境 的 精确 性 直接 相关 , 故 构造 单 
元 测试 环境 时 ,应 尽 可 能 考虑 各 种 环境 因素 ,如 所 有 的 隐 性 输入 (系统 时 钟 , 文 件 状态 、 单 
元 加 载 地 点 等 ) 应 被 考虑 ,此 外 实际 环境 的 代表 物 ( 相 同 的 编译 器 ,加载 者 .操作 系统 .计算 
机 、 输 入 分 布 等 ) 也 应 被 考虑 。 


5.4 单元 测试 用 例 的 设计 


5.4.1 单元 测试 的 内 容 
单元 测试 应 主要 从 单元 接口 .局 部 数据 结构 ,独立 路 径 、 出 错 处 理 , 边 界 条 件 几 个 方面 
对 被 测 单元 进行 检查 ,如 图 5-2 所 示 。 


1. 单元 接口 出 错 处 理 。 单元 接口 。 局 部 数据 结构 
对 单元 接口 的 测试 应 主要 考虑 如 下 方面 : 

传递 给 被 测 单元 的 参数 与 被 测 单元 的 形式 参 被 测 单元 
数 在 属性 .个 数 .顺序 上 是 否 一 致 。 

被 测 单元 调用 子 模块 时 ,传递 给 子 模 块 的 参 。 独立 路 径 边界 条 件 
数 与 子 模块 的 形式 参数 在 属性 .个 数 、 顺 序 上 图 5-2 单元 测试 的 内 容 

是 否 一 致 。 

是 否 修改 了 只 做 输入 用 的 形式 参数 。 

。 输 出 给 标准 函数 的 参数 与 标准 函数 的 形式 参数 在 属性 ,个 数 、 顺 序 上 是 否 一 致 。 
全 局 变量 的 定义 在 各 模块 中 是 否 一 致 。 

。 约束 条 件 是 否 通过 形式 参数 进行 传递 。 

若 模块 通过 外 设 进 行 1/O 操作 时 ,还 应 该 考虑 下 列 因素 : 

。 文 件 属性 是 否 正确 。 

OPEN 与 CLOSE 语句 是 否 正 确 。 

。 规定 的 1/O 格式 说 明 与 1/O 语句 是 否 匹 配 。 

缓冲 区 容量 与 记录 长 度 是 否 匹 配 。 

。 在 进行 读 / 写 操作 之 前 是 否 打 开 了 文件 。 

。 在 结束 文件 处 理 时 是 否 关闭 了 文件 。 

正文 书写 /输入 错误 是 否 存在 。 

1/O 错误 是 否 检 查 并 做 了 处 理 。 


2. 局 部 数据 结构 

对 被 测 单元 的 局 部 数据 结构 测试 应 主要 考虑 如 下 方面 : 
。 数据 类 型 说 明 是 否 正确 。 

。 是 否 使 用 了 尚未 赋值 或 尚未 初始 化 的 变量 。 

。 是否 使 用 了 错误 的 初始 值 或 错误 的 默认 值 。 
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。 变量 名 是 否 存在 拼写 错误 或 书写 错误 。 
。 数据 类 型 是 否 一 致 
除 局 部 数据 结构 外 ,还 应 尽 可 能 对 影响 被 测 单元 的 全 局 数据 结构 进行 检查 。 


3. 独立 路 径 
对 被 测 单元 的 基本 路 径 集 合 中 的 独立 路 径 进行 测试 ,以 及 对 循环 结构 进行 测试 ,可 以 
发 现 大 量 的 路 径 错误 ,例如 不 正确 的 计算 ,不 正确 的 比较 和 不 正常 的 控制 流 等 。 

不 正确 的 计算 主要 包括 : 

。 运算 的 优先 次 序 不 正确 ,或 误解 了 运算 的 优先 次 序 ; 

。 运算 的 方式 错误 ,例如 运算 的 对 象 在 类 型 上 不 相 容 算法 错误 .初始 化 错误 、 运 算 
精度 不 够 .表达 式 的 符号 不 正确 等 。 

比较 和 控制 流 的 错误 主要 包括 : 

。 进行 比较 的 两 个 数 类 型 不 同 ; 

。 不 正确 的 逻辑 运算 符 或 优先 次 序 ; 

。 因 浮 点 运算 精度 问题 而 造成 的 两 值 不 等 ; 

。 关系 表达 式 中 的 变量 和 关系 运算 符 错 误 ; 

。 循环 次 数 多 一 次 或 少 一 次 ; 

。 循环 终止 条 件 错误 ; 

。 当 遇 到 发 散 的 迭代 时 无 法 终止 的 循环 ; 

。 对 循环 变量 的 修改 不 恰当 。 


4. 出 错 处 理 
被 测 单元 不 仅 能 处 理 常 规 的 输入 ,对 于 出 错 的 情况 ,也 应 能 事先 预见 并 进行 适当 的 处 
理 ,这 样 的 被 测 单元 的 功能 才 是 完善 的 。 被 测 单元 的 出 错 处 理 功能 的 缺陷 主要 包括 ， 
。 出 错 的 描述 难以 理解 ; 
。 出错 的 描述 不 足以 定位 错误 和 确定 出 错 原 因 ; 
显示 的 错误 与 实际 的 错误 不 符 ; 
对 出 错 条 件 的 处 理 不 正确 ; 
。 在 对 错误 进行 处 理 之 前 ,出 错 条 件 已 引起 系统 的 干预 。 


5. 边界 条 件 

发 生 在 被 测 单元 边界 上 的 错误 主要 有 : 

。 对 循环 体 执行 0 次 或 最 大 次 数 时 发 生 的 错误 ; 

。 某 变量 取 最 大 值 或 最 小 值 时 发 生 的 错误 ; 

。 数 据 流 , 控 制 流 中 恰好 等 于 、 大 于 、 小 于 确定 的 比较 值 时 发 生 的 错误 。 
5.4.2 单元 测试 用 例 的 设计 思 

在 单元 测试 阶段 , 除 进行 代码 检查 等 静态 测试 活动 以 外 , 均 需要 设计 测试 用 例 并 执行 
它们 ,以 验证 被 测 单元 是 否 达到 了 设计 规格 说 明 的 预期 要 求 。 设 计 测 试用 例 的 依据 主要 
是 软件 的 详细 设计 文档 和 被 测 单元 的 源 代码 清单 。 

单元 测试 用 例 设 计 步 又 如 下 。 


RS 
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(1) 为 被 测 单元 运行 设计 测试 用 例 

设计 测试 用 例 ,使 被 测 单元 可 以 在 建立 的 单元 测试 环境 中 运行 。 

(2) 为 正 向 测试 设计 测试 用 例 

设计 测试 用 例 ,验证 被 测 单元 能 否 实 现 设 计 文 档 中 规定 的 各 项 功能 。 

(3) 为 逆向 测试 设计 测试 用 例 

设计 测试 用 例 , 验 证 在 输入 数据 不 符合 要 求 的 情况 下 被 测 单元 能 否 进行 恰当 的 处 理 。 

(4) 为 满足 特殊 需求 设计 测试 用 例 

设计 测试 用 例 ,验证 被 测 单元 能 否 满足 某 特殊 的 要 求 , 例 如 在 安全 性 、 保 密 性 方面 的 

(5) 为 代码 覆盖 设计 测试 用 例 

设计 测试 用 例 ,以 达到 特定 的 覆盖 标准 。 为 达到 特定 的 覆盖 标准 ,仅仅 在 设计 测试 用 
例 前 提出 覆盖 标准 往往 是 不 够 的 ,还 需要 在 执行 测试 用 例 后 对 覆盖 率 进 行 分 析 ,判断 是 否 
达到 了 特定 的 覆盖 标准 ,进而 补充 测试 用 例 。 

在 单元 测试 阶段 的 动态 测试 活动 中 , 白 盒 及 黑 盒 测试 方法 测试 用 例 的 使 用 熟 先 熟 后 ? 
一 般 说 来 ,由 于 黑 盒 测 试 是 从 被 测 单元 外 部 进行 测试 ,成 本 较 低 ,可 先 对 被 测 单元 进行 黑 
盒 测 试 , 即 验证 其 能 和 否 完成 规格 说 明 中 指定 的 功能 ,之 后 再 进行 白 盒 测试 , 即 统计 黑 盒 测 
试用 例 的 履 盖 率 , 判 断 测试 是 否 达到 了 指定 的 覆盖 标准 ,针对 未 覆盖 的 逻辑 单元 设计 测试 
用 例 , 以 弥补 黑 盒 测试 不 彻底 的 不 足 。 


5.5 单元 测试 工具 CppUnit 简介 


在 本 章 的 前 几 节 中 ,我 们 对 单元 测试 进行 了 介绍 ,下面 结合 当前 广泛 使 用 的 单元 测试 
工具 CppUnit 介绍 单元 测试 的 执行 过 程 。 
5.5.1 CppUnit 简介 

CppUnit 是 XUnit 家 族 的 一 员 。XUnit 家 族 成 员 有 很 多 , 如 JUnit, CppUnit， 
PythonUnit 等 。CppUnit 的 最 初版 本 移植 自 JUnit, 是 一 个 非常 优秀 的 专门 面向 C+4+ 的 
开源 的 单元 测试 框架 。 

CppUnit 是 一 个 基于 测试 驱动 开发 的 测试 框架 , 它 为 我 们 进行 测试 驱动 开发 提供 了 
一 个 有 力 的 工具 ,借助 它 可 以 进行 快速 的 单元 测试 。 

下 面 主要 介绍 VC 6. 0 环境 下 CppUnit 的 使 用 方法 。 


1. CppUnit 的 安装 和 环境 配置 

(1) 首先 下 载 CppUnit。CppUnit 为 压缩 文件 ,以 下 使 用 的 版 本 是 CppUnit 1. 12.0。 

(2) 编译 CppUnit 工程 文件 。 

四 将 CppUnitl. 12. 0. tar. gz 解压 缩 到 本 地 硬盘 ,如 E:\vc pri\cppunitl. 12.0, 如 
图 5-3 所 示 。 

@ 启动 VC 6. 0, 选 择 File 菜单 , 单 击 Open Workspace 选项 ,在 打开 的 Open 
Workspace 对 话 框 中 ,选择 cppunitl. 12. 0\src 文件 夹 中 的 工程 文件 CppUnitLibraries. 


了 
PT WAAR ealx) 


IF 
目标 路 径 和 0 果 不 存在 格 被 创 哇 ) 四) 
Eve pri\eppunitl. 12.0 
更 新 方式 
同 解 压 并 车 换 文件 E) 
解压 并 更 新 文件 四 
妈 更 新 已 经 存在 的 文件 了 ) 


着 aas 
由 加 tomlosais 
BO emaish 

© javs docment 

© rertonclemer 
| 焉 羡 方式 | @ office 2003 

@ 在 重 关 前 询问 &) | 四 加 okc 

〇 没有 提示 直接 洲 闫 ) | Becyeled 

© zcrcu 
J BD Systen yolme Inforr 


i 日 名 ve ps 

| 口 解压 文件 到 子 目 录 QL) 3 © me 
| 口 保留 损坏 的 文件 @) ppunitDeno 

| 全 © winizaityl .2 

| 口 在 资源 剖 理 器 中 显示 文件 &) 由 外 raue 


RNA winxn inaees 


人 〇 号 过 已 经 存在 的 文件 外) 


图 5-3 CppUnitl. 12. 0. tar. gz 文件 解压 缩 
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图 5-4 打开 CppUnit 工程 文件 


dsw, 单 击 “ 打 开 ” 按 钮 ,如 图 5-4 所 示 。 

选中 TestPlugInRunner 为 当前 工程 ,选择 Build 菜单 的 Batch Build 选项 , 打开 
Batch Build 对 话 框 ,如 图 5-5 所 示 。 选 中 所 有 Project, 然 后 单 击 Build 按钮 ,将 生成 
CppUnit 的 库 文件 ,其 位 置 在 cppunitl. 12. 0\lib 目录 下 。 对 于 CppUnit_dll 项 目 , 其 


， 六 


Release 版 生成 CppUnit_dll. lib 和 CppUnit_dll. dll; Debug 版 生成 CppUnitd_dll. lib 和 
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CppUnitd_dll. dll。 这 是 CppUnit 基本 类 库 。 对 于 TestRunner 项 目 , 其 Release 版 生成 
TestRunner. lib 和 TestRunner. dll, Debug 版 生成 TestRunnerd. lib 和 TestRunnerd. dll。 
这 是 使 用 MFC 的 图 形 化 界面 的 类 库 。 
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图 5-5 Build CppUnit 工程 文件 


(3) 设置 VC 6.0 环境 。 
@ 选择 Tools 菜单 , 单 击 Options 选项 ,如 图 5-6 所 示 。 
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图 5-6 ”Options 菜单 项 
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打开 Options 对 话 框 ,选择 Directories 选项 卡 , 在 Show directories for 下 拉 列 表 框 中 
选择 Include files 选项 ,在 Directories 框 中 添加 路 径 E:\ve pri\CPPUnitl. 12. 0\include， 
如 图 5-7 所 示 。 
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图 5-7 设置 Include files 路 径 


使 用 同样 方法 ,添加 Library files 路 径 *E:\ve pri\cppunitl. 12. 0\lib”。 

@ 选择 Project 菜单 , 单 击 Settings 选项 (注意 应 先 打开 一 个 项 目 ) ,打开 Project 
Settings 对 话 框 , 选 择 Link 选项 卡 , 在 Category 下 拉 列 表 框 中 选择 General 选项 ,在 
Object/Library modules 文本 框 中 填 人 testrunnerd. lib cppunitd. lib ,如 图 5-8 所 示 。 


py 恤 


testrunnerd.lib cppunitd.lib jnologo 
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图 5-8 设置 Link 选项 
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选择 CVC ++ 选项 卡 ,在 Category 下 拉 列 表 框 中 选择 Code Generation 选项 , 在 Use 
run-time library 下 拉 列 表 框 中 选择 Debug Multithreaded DLL 选项 ,如 图 5-9 所 示 。 
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图 5-9 设置 run-time library 


@@ 在 系统 的 环境 变量 Path 中 添加 相应 路 径 。 该 步骤 是 为 了 确保 在 以 后 的 测试 项 目 
中 ,系统 能 够 找到 相应 的 动态 链接 库 , 例 如 TestRunnerd. dll 。 

在 Windows 桌面 上 选中 “我 的 电脑 ”图 标 , 单 击 右键 , 在 弹出 的 快捷 菜单 中 选择 “ 属 
性 ”选项 ,打开 “系统 属性 ”对 话 框 ,选择 “高 级 ”选项 卡 ,如 图 5-10 所 示 。 

单 击 “ 环 境 变 量 ” 按 钮 ,出 现 “ 环 境 变 量 ” 对 话 框 ,在 “系统 变量 ”选项 区 中 选择 Path 系 
统 变量 , 单 击 “编辑 按钮 ,如 图 5-11 所 示 。 


要 进行 大 多 数 改 动 ， 您 必须 作为 管理 员 登 录 。 


性 能 
视 沉 效果 ， 处 理 器 计划 ， 内 存 使 用 ， 以 及 虚拟 内 存 


5-10 环境 变量 设置 5-11 设置 Path 
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打开 “编辑 系统 变量 ”对 话 框 ,在 Path 系统 “变量 值 * 文 本 框 中 添加 E:\ve prj\ 
cppunitl. 12. 0\include 和 E:\ve prj\cppunitl. 
12. 0\lib, 变量 值 之 间 用 分 号 ";” 分 隔 , 单 击 “ 确 
定 ” 按 钮 ,如 图 5-12 所 示 。 变量 值 四 : LinclualdE: \ve prjACPPUnitl 12.0\1ib 
至 此 ,CppUnit 的 环境 就 配置 完成 。 二 


2. CppUnit 基本 原理 

在 CppUnit 中 ,一 个 或 一 组 测试 用 例 的 测试 
对 象 被 称 为 Fixture。Fixture 就 是 被 测试 的 目 
标 , 可 以 是 一 个 对 象 或 者 一 组 相关 的 对 象 ,甚至 一 个 函数 。 有 了 被 测试 的 Fixture, 就 可 以 
对 这 个 Fixture 的 某 个 功能 、 某 个 可 能 出 错 的 流程 编写 测试 代码 。 

使 用 CppUnit 的 步骤 如 下 。 

(1) 生成 CppUnit :: TestFixture 或 CppUnit :: TestCase 的 一 个 派生 类 ( 形 如 
CX X XTestCase) ,该 类 我 们 称 其 为 测试 类 。 在 该 类 中 为 测试 用 例 添加 一 个 成 员 函 数 
( 形 如 testXXX) 用 于 测试 目标 代码 。 可 以 在 该 类 中 实现 父 类 中 的 虚 函 数 setUp() 和 
tearDown() ,其 中 setUp() 函 数 完成 代码 初始 化 工作 ,tearDown() 函 数 完成 清理 工作 。 
注意 setUp() 和 tearDown() 的 实现 不 是 必须 的 。 

(2) 在 CX XXTestCase 类 中 添加 如 下 宏 : 

CPPUNIT_TEST_SUITE(CX X X TestCase) 


CPPUNIT_TEST(testX XXX) 
CPPUNIT_TEST_SUITE_ENDO 


这 三 个 宏 非常 关键 ,通过 这 三 个 宏 , 就 把 CX X XTestCase 类 和 testX XX 成 员 函 数 


注册 到 测试 列表 中 了 。 
(3) 添加 宏 : 


CPPUNIT_TEST_SUITE_REGISTRATION(Cx x x TestCase) 


注意 ,该 宏 位 于 所 有 类 和 函数 之 外 。 该 宏 将 CX X X TestCase 测试 类 注册 到 
TestFactory 工厂 中 ,在 整个 基于 CppUnit 的 程序 框架 中 ,该 宏 起 到 一 个 桥梁 的 作用 。 
(4) 在 testXXX 成 员 函 数 中 添加 宏 : 


CPPUNIT_ASSERT EQUAL(value., function) 


其 中 ,function 为 被 测 函 数 ,value 为 预期 输出 值 。 此 宏 称 为 断言 宏 ,如 果 function 的 输出 
与 value 值 不 符 ,程序 将 返回 一 个 错误 信息 ,表示 在 测试 目标 代码 中 发 现 了 一 个 错误 。 在 
testX XX 成 员 函 数 中 可 以 添加 多 个 断言 宏 。 使 用 这 种 机 制 , 实 际 上 就 可 以 将 多 个 测试 
用 例 添加 到 测试 程序 中 。 有 关 断 言 宏 ,读者 可 以 查看 TestAssert. h 文件 。 

(5) 在 主 函 数 ( 如 main() 函数) 或 程序 的 初始 化 函数 (如 基于 MFC 对 话 框 程序 的 
initInstance() 函 数 ) 中 添加 测试 代码 。 主 要 有 下 面 3 条 语句 : 

Q@ CppUnit :: TextUi:: TestRunner。 该 语句 生成 TestRunner 的 对 象 。 目 前 ， 
CppUnit 提供 了 3 种 TestRunner, 包 括 : 


变量 名 QD: Path 


图 5-12 添加 path 值 
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CppUnit::TextUi::TestRunner // 文本 方式 的 TestRunner 
CppUnit: :QtUi::TestRunner // QT 方式 的 TestRunner 
CppUnit:: MfcUi:: TestRunner // MFC 方式 的 TestRunner 


@ runner. addTest(Csuite) 。 该 语句 添加 测试 对 象 到 TestRunner。 其 中 ,suite 是 一 
个 CppUnit: :Test #* 类 型 。 一 般 suite 的 生成 方法 为 

CppUnit:: Test * suite = CppUnit: :TestFactoryRegistry:: getRegistry(). makeTest() ; 
其 中 ，CppUnit :: TestFactoryRegistry :: getRegistry ( ) 返回 一 个 CppUnit :: 
TestFactoryRegistry &. 类 型 。 

@ runner. run() 。 该 语句 运行 测试 对 象 。 
5.5.2 CppUnit 单元 测试 实例 1 


1. 问题 描述 
对 求 3 个 整数 中 最 大 值 的 程序 进行 测试 。 
2. 测试 用 例 


对 求 3 个 整数 中 最 大 值 的 程序 进行 测试 ,应 先 求 出 3 个 整数 之 间 关 系 的 等 价 类 表 , 如 
表 5-1 所 示 。 表 5-2 是 根据 表 5-1 设计 的 测试 用 例 。 


表 5-1 3 个 整数 之 间 关系 的 等 价 类 表 


编号 | 等 价 类 | 预期 输出 | 编号 | 等 价 类 | 预期 输出 | 编号 | 等 价 类 预期 输出 
1 a>b>e a 6 c>b>a c 1 b=c>a b 或 c 
六 a>c>b a a 二 b>c | a 或 b 12 a>b=¢ a 
3 b>a>e b 8 c>a=b c is a 二 b==c | a 或 b 或 c 
4 b>c>a b 9 a 一 c>b | a 或 c 
5 c>a>b c 10 b>a=c b 
表 5-2 测试 用 例 
编号 | [a, b, c] | 预期 输出 | 编号 | [a, b, c] | 预期 输出 | 编号 | [a,b,c] | 预期 输出 
1 [9, 8, 7] 9 6 [7, 8, 9] 9 11 [8, 9, 9] 9 
2 [9, 7, 8] 9 Ld [9, 9, 8] 9 12 [9, 8, 8] 9 
3 [8, 9, 7] 9 8 [8, 8, 9] 9 13 [9, 9, 9] 9 
4 [7, 9, 8] 9 9 [9, 8, 9] 9 
5 [8, 7, 9] 9 10 [8, 9, 8] 9 


3. 使 用 CppUnit 进行 单元 测试 
在 求 3 个 整数 中 最 大 数 的 程序 中 ,主要 对 类 CMaxNum 中 的 getMaxNum(int * ， 


int) 函数 进行 测试 。 以 下 给 出 源 代码 。 


// CMax. cpp 
class CMaxNum 


{ 


}; 


public: 

CMaxNumO)!{}; 
~CMaxNum(){); 

int get MaxNum(int * , int); 


// CMax. cpp 
# include <iostream. h> 
#include "CMax. h" 


int CMaxNum: :get MaxNum(int * ay 


{ 


} 


int MaxNum; 
MaxNum=a[0]; 
for(int i=1;i<n—1; i++) 
{ 
{(MaxNum<=a[i]) 
MaxNum=a[i]; 
} 


return MaxNum; 


// MaxTestCase. cpp 
# include "Cmax. h" 
# include "CppUnit/TestFixture. h" 


# include "CppUnit/extensions/ HelperMacros. h" 


// 定义 测试 类 


class CMaxTestCase : 


{ 


}; 


CPPUNIT_TEST_SUITE(CMaxTestCase); 


CPPUNIT_TEST(test MaxNum); 
CPPUNIT_TEST_SUITE_END()， 
public: 
// 添 加 测试 用 例 
void testMaxNum() 
{ 

CMaxNum num; 

int a[3]={9, 8, 7}; 


CPPUNIT_ASSERT_EQUAL(9, num. get MaxNum(a, 3)); 


a[0]=9; a[l]=7; a[2]=8; 


CPPUNIT_ASSERT_EQUAL(9, num. getMaxNum(a, 3)); 


a[0]=8; a[1]=9; a[2]=7; 


CPPUNIT_ASSERT EQUAL(9. num. getMaxNum(a., 3)); 


// 自 动 注册 测试 类 
CPPUNIT_TEST_SUITE_REGISTRATION(CMaxTestCase); 
// MaxApp. cpp 


int n) 


// 该 处 存在 错误 


public CppUnit: : TestFixture 


// 创 建 一 个 TestSuite 
// 添 加 一 个 TestCase 
// 结 束 一 个 TestSuite 创建 
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// 第 1 个 测试 用 例 


// 添 加 断言 测试 


// 第 2 个 测试 用 例 


// 添 加 断言 测试 


// 第 3 个 测试 用 例 


// 添 加 断言 测试 
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#include <=CppUnit/ui/text/TestRunner. h 
#include <CppUnit/extensions/TestFactoryRegistry. h> 


void main() 


CppUnit:: 
定义 运行 实例 
CppUnit:: TextUi:: TestRunner runner; 

添加 测试 ,将 测试 包 注册 到 匿名 的 TestFactory 工厂 中 


runne 


* suite CppUnit:: TestFactoryRegistry: : getRegistry(). makeTest(); 


addTest(suite) ; 
// 运 行 测试 


runner. run(); 


先 添加 4 个 测试 用 例 , 程 


行 出 现 错误 ,结果 如 图 5-13 所 示 。 


E:\We prj\CMaxNumber\Debug\CMaxNumber.exe”™ 


testMaxNun (P》 line: 23 E:Wwe prj\CMaxNunber\MaxTes 


rtion failed 


图 5-13 运行 结果 显示 


程序 运行 结果 明确 指出 了 错误 的 位 置 在 MaxTestCase. > 的 23 行 ,错误 的 原因 是 
程序 求 得 的 最 大 值 是 8, 实 际 但 (预期 值 ) 应 该 是 9。 经 过 检查 ,发 现 了 程序 的 错误 在 
CMax. cpp 中 的 for(int i n 一 1;i++ ) 语 句 , 应 将 此 语句 为 for(int i=1;i=n; 
i++ )。 经 过 修改 后 ,程序 的 运行 结果 正确 ,如 图 5-14 所 示 。 
排除 错误 后 ,可 以 接着 将 后 8 个 测试 用 例 添加 到 程序 中 并 运行 ,直到 测试 全 部 通过 。 
通过 该 例子 我 们 对 CppUnit 的 使 用 应 该 有 了 一 个 基本 的 了 解 。 在 5. 5. 3 小节 将 给 出 一 
个 复杂 一 些 的 例子 ,并 使 用 基于 MFC 界面 方式 的 输出 测试 结果 。 
5.5.3 ”CppUnit 单元 测试 实例 2 


. 问题 描述 


四 造 斐 波 那 契 (Fibonacci) 数 列 , 用 测试 驱动 开发 的 方法 完成 类 CFib( 类 CFib 用 于 构 
造 斐 波 那 契 数列 ) 。 


国 “ENvc prjNCMaxNumberDebuegMCMaxNumber.exe” 


ok ci tests> 
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any key to continue, 


图 5-14 ”修改 语句 后 的 运 


2. 使 用 CppUnit 完成 测试 驱动 开发 


(1) 创建 基于 对 话 框 的 应 用 程序 
方式 输出 需要 使 用 MFC, 所 以 我 们 首先 在 VC 中 创建 
FibTestApp, 如 图 5-15 所 示 。 


i 果 以 GUI 方式 输出 ,由 于 GUI 
-个 基于 对 话 框 的 应 用 程序 


本 实例 测试 用 例 4 


后 FibTestApp - Microsoft Visual C** - [FibTestAppD.cpp] 加 局 [| 
[BEle Ed Yew Insert Broject Buld Took Window Hep lslx| 
| 大 | 芝 加 名 | 鸡西 病 | 到 三 | 中 | 砚 导 | 名 [cppuNr TEST_ SumE_RE 本 | 
| CFibTestAppDig 。” 司 | Al class membersj 司 | cFibTestwppDlg 习 凡 7 | 多 耳 了 加 全 | 


司 可 | winciude 


DTA 司 


国 FibTestApp.cpp 
国 FibTestApp.re 


国 StdAbccpp 
5 Header Files 


乱 workspace 'FibTestApp*: 1 project(s] ”和 
ibTestApp files |) Hifdef _DEBUG 
Source Files 从 Hdefine new DEBUG_NEW 
国 CFib.cpp Sundef THIS_FILE 
国 FibTestcpp static char THIS_FILE[] = _FILE_; 
Hendif 


FibTestAppDig.cpp 


3 iew | 多 ResourceView 


#include “FibTestAppD1g.h 


LAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAY 
// CFibTestAppDlg dialog 


CFibTestAppD1g: :CFibTestAppD1g(Cund* pParent /=NULL*/) 
: CDialog(CFibTestAppD1g::IDD, pparent) 
{ 
1/{{AFX_DATA_INIT(CFibTestAppD1g) 
// NOTE: the ClassWizard will add nenber initial 
/1/9AFX_DATA_INIT 
// Note that Loadicon does not require a su 
各 m_nhIcon = AfxGetApp()->LoadIcon(IDR_HAINFRAME); 


国 pievew| | 小 


ating 5ode- 
ng 


Ready 


ae Ynd in Fifes YW Bnd in Files 5 和 Results X SOUL Debuseing A4|| 


| 


in1.Col1 IEcjcoL 


本 例 使 用 CppUnit 进行 单元 测试 的 方 


图 5-15 创建 对 话 框 程序 


与 上 一 个 例子 基本 相同 ,不 同 点 在 于 : 基于 


字符 界面 的 CppUnit 测试 程序 (如 上 例 ) ,其 生成 运行 实例 的 代码 是 在 main() 函数 中 实现 
的 。 由 于 MFC 对 代码 进行 了 封装 ,所 以 对 基于 字符 界面 的 CppUnit 测试 程序 (如 本 例 )， 
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我 们 将 生成 运行 实例 的 代码 写 在 InitInstance() 中 .同时 注释 掉 生 成 对 话 框 的 代码 。 其 代 
码 如 下 : 


// FibTestApp. cpp 
#include "FibTestApp. h" 
# include "FibTestAppDlg. h" 
#include <CppUnit/ui/mfc/ TestRunner. h> 
#include <CppUnit/extensions/ TestFactoryRegistry. h> 
BOOL CFibTestAppApp:: InitInstance() 
{ 
#ifdef LAFXDLL 


Enable3dControls(); //Call this when using MFC in a shared DLL 

#else 

Enable3dControlsStatic() ; //Call this when linking to MFC statically 

#endif 

CppUnit:: Test * suite = CppUnit:: TestFactoryRegistry:: getRegistry(). makeTest(); 


// 定 义 运行 实例 

CppUnit:: M{cUi:: TestRunner runner; 

// 添 加 测试 ,将 测试 包 注册 到 匿名 的 TestFactory 中 
runner. addTest(Csuite); 

// 运 行 测试 


runner. run(); 


/* CFibTestAppDlg dlg; 
m_pMainWnd = &dlg; 
int nResponse = dlg. DoModal(); 
if (nResponse == IDOK) 
{ 
//TODO: Place code here to handle when the dialog is 
//dismissed with OK 
} 
else if (nResponse = = IDCANCEL) 
{ 
//TODO: Place code here to handle when the dialog is 
//dismissed with Cancel 
} */ 
return FALSE:; 
} 


(2) 定义 测试 类 。 


// FibTest. cpp: 
# include "CFib. h" 
# include "CppUnit/TestFixture. h" 
#include "CppUnit/extensions/ HelperMacros. h" 
// 定 义 测试 类 FibTest 
slass Chib Tedtpablic Chpunite: Tosiztiie 
{ 
CPPUNIT_TEST_SUITE(CFibTest); // 定 义 测 试 包 
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CPPUNIT_TEST(testFib) ; // 添 加 测试 用 例 testFib 
CPPUNIT_TEST_SUITE_END()， // 结 束 测试 包 定 义 
public: 
// 测 试用 例 
void testFib() 
{ 
CFib fb; 
// 在 此 添加 断言 测试 
CPPUNIT_ASSERT_EQUAL(1, fb. fib(1)); 
CPPUNIT_ASSERT_EQUAL(1, fb. fib(2)); 
// 添 加 断言 测试 第 3 个 元 素 
CPPUNIT_ASSERT_EQUAL (2, fb. fib(3)); 
// 添 加 断言 测试 第 5 个 元 素 
CPPUNIT_ASSERT_EQUAL (5, fb. fib(5)); 
} 
i 
// 自 动 注册 测试 包 
CPPUNIT_TEST_SUITE_REGISTRATION(CFibTest) 


//CFib. h 被 测试 类 ,其 成 员 函 数 int fib(int) 测 试 对 象 
class CFib 
{ 
public: 
CFibO!{} 
一 CFib(){》 
int fib(int); 
}s 
//CFib. cpp : 
# include "CFib. h" 
int CFib::fib(int n) 
{ 
return 1; 


} 


(3) 首先 编写 一 个 测试 用 例 testFib ,断言 fib(1) 二 1,fib(2) 二 1。 这 表示 该 数列 的 
第 1 个 元 素 和 第 2 个 元 素 都 是 1。 测试 用 例 testFib 已 在 前 面 申 明 。 在 此 主要 是 新 增 
TestFib 测试 用 例 实 现 , 测 试 第 1 个 元 素 和 第 2 个 元 素 。 


void CFibTest: :testFib() 
{ 
CFib fb; 
// 在 此 添加 断言 测试 
CPPUNIT_ASSERT_EQUAL(1, fb. fib(1)); 
CPPUNIT_ASSERT_EQUAL(], fb. fib(2)); 
} 


(4) 测试 用 例 不 能 编译 通过 。 为 了 让 测试 用 例 通过 , 需 实现 fib 函数 (被 测 函 数 )。 


int CFib: :fib(int n) 
{ 
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return 1; 


} 
(5) 编译 后 测试 用 例 可 以 运行 。 继 续 测试 第 3 个 元 素 。 


void CFibTest: : testFib() 
‘ 
CFib fb; 
// 在 此 添加 断言 测试 
CPPUNIT_ASSERT_EQUAL(]1, fb. fib(1)); 
CPPUNIT_ASSERT_EQUAL(]1. fb. fib(2)); 
// 添 加 断言 测试 第 3 个 元 素 
CPPUNIT_ASSERT_EQUAL (fb. fib(1)+ fb. fib(2), fb. fib(3)); 
} 


(6) 新 增加 的 断言 导致 执行 测试 用 例 失败 ,如 图 5-16 所 示 。 


图 5-16 测试 运行 结果 (1) 


需 对 fib 函数 进行 修改 如 下 。 
int CFib: :fib(int n) 
{ 
if (Cn == 3) return fib(1)+fib(2); 


return 1; 


} 


(7) 测试 用 例 运行 通过 ,如 图 5-17 所 示 。 
继续 测试 第 4 个 元 素 。 


void CFib: :testFib() 

《 
CFib fb; 
// 在 此 添加 断言 测试 
CPPUNIT_ASSERT_EQUAL(1, fb. fib(1)); 
CPPUNIT_ASSERT_EQUAL(1. fb. fib(2)); 
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图 5-17 测试 运行 结果 (2) 


// 添 加 断言 测试 第 3 个 元 素 

CPPUNIT_ASSERT_EQUAL({b. fib(1)+ fb. fib(2), fb. fib(3)); 

// 添 加 断言 测试 第 4 个 元 素 

CPPUNIT_ASSERT_EQUAL({b. fib(2)+ fb. fib(3), fb. fib(4)); 
} 


(8) 新 增加 断言 又 导致 测试 用 例 执 行 失败 ,因此 继续 修改 fib 函数 。 


int CFib: : fib(int n) 

{ 
if (n == 3) return fib(1)+fib(2); 
if (n == 4) return fib(2)+fib(3); 
return 1; 


} 
(9) 测试 用 例 可 运行 ,但 是 代码 出 现 了 宛 余 ,所 以 需要 对 fib 函数 进行 重 构 。 
int CFib: :fib(int n) 
{ 
if (n== 1||n== 2) return 1; 


else return fib(n 一 1) 十 fib(n 一 2); 
} 


(10) 由 于 还 未 考虑 错误 输入 值 ( 如 输入 值 0, 一 1 等 ), 故 添加 错误 输入 值 测试 项 。 


void CFib: :testFib() 
{ 
CFib fb; 
// 在 此 添加 断言 测试 
CPPUNIT_ASSERT_EQUAL(1, fb. fib(1)); 
CPPUNIT_ASSERT_EQUAL(1, fb. fib(2)); 
// 添 加 断言 测试 第 3 个 元 素 
CPPUNIT_ASSERT_EQUAL({b. fib(1)+ fb. fib(2), fb. fib(3)); 
// 添 加 断言 测试 第 4 个 元 素 
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CPPUNIT_ASSERT_EQUAL(fb. fib(2)+ fb. fib(3), fb. fib(4)); 


// 添 加 错误 输入 值 测试 项 

CPPUNIT_ASSERT_EQUAL(0, fb. fib(0)); 

CPPUNIT_ASSERT_EQUAL(0, fb. fib(—1)); 
} 


(11) 再 次 运行 测试 用 例 ,无 法 通过 ,因此 还 需 修改 fib 函数 如 下 。 


int CFib: :fib(int n) 
{ 
if (n == 0) return 0; 
if (n== 1||n== 2) return 1; 
else return fib(n 一 1) 十 fib(n 一 2); 
} 


(12) 再 次 运行 所 有 测试 用 例 , 所 有 测试 用 例 运行 通过 ,如 图 5-18 所 示 。 


图 5-18 测试 运行 结果 (3) 


至 此 ,使 用 CppUnit 对 斐 波 那 契 (Fibonacci) 数 列 进行 测试 驱动 开发 的 全 过 程 完毕 。 
5.6 小 结 


单元 测试 是 所 有 测试 活动 中 最 早 进行 的 一 种 测试 ,也 是 极为 重要 的 一 种 测试 。 它 针 
对 软件 的 基本 组 成 单元 进行 测试 ,是 其 他 测试 活动 的 基础 。 它 看 似 烦 琐 , 却 能 以 最 低 的 成 
本 发 现 和 修复 软件 单元 中 的 错误 。 忽视 单元 测试 是 十 分 不 明智 的 做 法 。 

应 有 计划 地 执行 单元 测试 ,并 在 整个 软件 开发 的 周期 内 对 其 进行 维护 ,使 单元 测试 可 
重用 。 

单元 测试 采用 白 盒 及 黑 盒 测试 方法 对 被 测 单元 从 静态 和 动态 两 方面 进行 测试 ,以 验 
证 编码 能 否 达 到 设计 规格 说 明 的 要 求 。 

单元 测试 中 的 被 测 单元 往往 不 是 一 个 可 以 独立 运行 的 程序 , 故 在 执行 单元 测试 阶段 
的 动态 测试 时 ,应 注重 建立 单元 测试 的 环境 ,以 达到 对 被 测 单元 进行 测试 的 目的 。 
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目前 ,有 很 多 单元 测试 工具 及 框架 可 供 选择 ,这 有 助 于 提高 单元 测试 的 自动 化 程度 ， 
且 大 都 支持 测试 驱动 开发 ,如 本 章 介 绍 的 CppUnit。 


习 题 


1. 单元 测试 的 含义 是 什么 ?“ 单 元 ”的 概念 在 任何 开发 场合 是 一 成 不 变 的 吗 ? 试 谈 
谈 你 的 观点 。 

2. 单元 测试 的 依据 是 什么 ?进行 单元 测试 的 目的 何在 ? 

3. 单元 测试 的 优点 有 哪些 ? 

4. 简 述 单元 测试 的 步骤 。 

5. 驱动 模块 和 桩 模块 的 含义 分 别 是 什么 ?在 单元 测试 中 ,一 定 要 开发 驱动 模块 和 桩 
模块 吗 ? 为 什么 ? 

6. 针对 某 被 测 程序 ,分 别 举 一 个 驱动 模块 和 桩 模块 的 例子 。 

7. 构造 单元 测试 环境 的 意义 何在 ? 

8. 单元 测试 应 主要 从 哪些 方面 对 被 测 单元 进行 检查 ? 

9. 在 单元 测试 的 动态 测试 活动 中 ,和 白 盒 与 黑 盒 测 试 方法 测试 用 例 的 使 用 有 什么 样 的 
关系 ? 试 谈 谈 你 的 观点 。 
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本 章 要 点 : 


集成 测试 的 任务 。 

集成 测试 的 对 象 。 
接口 的 分 类 。 

集成 测试 的 方法 。 

集成 测试 的 步骤 。 

集成 测试 的 策略 。 

集成 测试 中 模块 和 接口 的 确定 。 
关键 模块 的 概念 。 


对 于 被 测 软件 , 仅 进 行 单元 测试 是 远 远 不 够 的 ,通过 了 单元 测试 的 软件 单元 还 不 能 保 
证 在 集成 过 程 中 不 出 现 错误 。 要 排除 在 单元 集成 过 程 中 的 各 种 错误 ,应 进行 集成 测试 。 
本 章 介 绍 集成 测试 的 相关 概念 和 策略 。 


6.1 集成 测试 的 概念 


6.1.1 集成 测试 的 含义 

集成 测试 (Integration Testing) ,也 称 为 组 装 测试 .联合 测试 。 在 单元 测试 的 基础 上 ， 
应 根据 概要 设计 的 要 求 将 各 单元 组 装 成 子 系统 或 系统 ,在 单元 组 装 过 程 中 ,应 对 单元 进行 
整体 测试 ,发 现 并 清除 在 单元 连接 过 程 中 出 现 的 问题 ,确保 集成 到 一 起 的 各 单元 能 共同 完 
成 预期 的 功能 ,并 达到 要 求 的 性 能 ,这 就 是 集成 测试 的 任务 。 对 子 系统 的 集成 测试 ,也 称 
为 部 件 测试 。 

在 集成 测试 中 ,回归 测试 是 时 常 需要 使 用 的 。 当 对 集成 后 的 某 单元 进行 了 修改 ,就 需 
要 进行 回归 测试 ,验证 与 该 单元 组 装 在 一 起 的 其 他 单元 (尤其 是 上 层 单元 ) 能 否 正常 工作 。 

集成 测试 一 般 由 专门 的 测试 小 组 完成 ,测试 小 组 由 有 经 验 的 系统 设计 人 员 和 编程 人 
员 组 成 ,最 好 是 参加 了 被 测 项 目 开发 的 人 员 。 一 般 说 来 ,集成 测试 花费 的 时 间 远 远 超过 单 
元 测试 。 
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实践 表明 ,通过 了 单元 测试 的 单元 并 不 能 保证 在 集成 过 程 中 不 出 现 问题 ,程序 在 某 些 
局 部 反映 不 出 来 的 问题 ,可 能 会 在 全 局 上 暴露 出 来 ,影响 其 功能 的 实现 。 在 项 目 实践 中 ， 
几乎 不 存在 单元 在 组 装 过 程 中 不 出 现任 何 问题 的 情况 。 这 是 因为 单元 测试 具有 不 彻底 
性 , 它 对 于 单元 接口 的 正确 性 是 无 法 保障 的 ,以 下 的 问题 是 在 集成 测试 中 必须 考虑 的 。 

。 将 各 模块 组 装 起 来 的 过 程 中 ,穿越 模块 接口 的 数据 是 否 会 丢失 。 

。 各 子 功能 组 合 起 来 ,能 否 达到 预期 的 父 功能 。 

。 某 模块 的 功能 是 否 会 对 另 一 模块 的 功能 产生 不 利 影响 。 

。 全 局 数据 结构 是 否 存 在 问题 。 

。 单 个 模块 的 误差 积累 起 来 ,是 否 会 放大 到 不 可 接受 的 程度 。 

此 外 ,在 某 些 开发 模式 中 ,如 迭代 式 开发 ,设计 和 实现 是 迭代 进行 的 。 在 这 种 情况 下 ， 
集成 测试 的 意义 还 在 于 它 能 间接 地 验证 概要 设计 是 否 具有 可 行 性 。 

集成 测试 的 测试 对 象 包括 单元 间 的 接口 ,以 及 集成 后 的 功能 和 性 能 (其 中 以 对 功能 的 
测试 为 主 ) 。 

值得 一 提 的 是 ,在 如 今 的 测试 活动 中 ,单元 测试 和 集成 测试 的 界限 逐渐 模糊 。 单 元 测 
试 阶段 也 可 进行 集成 ,如 采用 自 底 向 上 的 方式 进行 集成 ,底层 的 单元 先 开 发 并 先 测试 ,这 
样 做 的 目的 是 避免 开发 桩 模块 。 所 以 在 实际 的 测试 工作 中 ,不 应 死 抠 单 元 测试 与 集成 测 
试 的 区 别 ,只 要 完成 了 相应 的 测试 活动 即 可 ,以 免 误 入 歧途 。 
6.1.2 接口 的 分 类 

对 接口 的 测试 是 集成 测试 的 主要 任务 ,在 集成 测试 阶段 ,主要 考虑 软件 系统 内 部 的 各 
种 接口 ,可 对 其 进行 如 下 分 类 。 


1. 函数 接口 
根据 函数 之 间 的 调用 关系 确定 的 接口 。 


2， 消息 接口 

消息 接口 在 用 面向 对 象 方法 开发 的 系统 及 嵌入 式 系统 中 比较 常见 。 使 用 消息 接口 
时 ,软件 的 模块 间 并 不 直接 联系 ,而 是 通过 消息 包 ( 遵 循 接口 协议 ) 发 生 关系 ,例如 整个 系 
统 共用 一 个 或 多 个 消息 包 队 列 ,消息 位 于 队列 的 头 部 。 由 操作 系统 进行 消息 包 的 调度 , 取 
出 各 队列 头 部 的 消息 ,并 调用 该 消息 的 处 理 模块 ,该 处 理 模块 的 核心 通常 是 一 个 被 动 的 有 
限 状态 机 模型 ,能 根据 消息 内 容 和 自身 状态 做 出 反应 ,能 完成 状态 的 迁移 并 将 发 往 另 一 个 
模块 的 消息 放 入 消息 队列 。 对 消息 接口 的 测试 一 般 用 工具 来 模拟 进行 。 


3. 类 接口 
在 使 用 面向 对 象 方法 开发 的 软件 系统 中 ,类 接口 是 基本 的 接口 。 对 于 类 接口 的 测试 ， 
传统 的 集成 测试 策略 难以 适用 , 详 见 本 书 第 8 章 。 


4. 其 他 接口 

主要 包括 全 局 变量 、 配 置 表 、 注 册 信息 、 中 断 等 。 在 进行 集成 测试 时 ,不 应 忽略 这 类 接 
口 , 若 忽略 或 无 意 中 遗 漏 了 对 此 类 接口 的 测试 ,有 可 能 会 影响 集成 测试 的 效果 。 对 这 类 接 
口 的 测试 可 借助 于 测试 工具 进行 。 
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6.1.3 集成 测试 的 测试 方法 

在 集成 测试 阶段 ,应 将 黑 盒 测试 方法 与 白 盒 测 试 方法 结合 起 来 使 用 。 使 用 黑 盒 测试 
方法 从 接口 处 对 子 系统 或 系统 进行 测试 ,在 其 基础 上 再 选择 性 地 使 用 白 盒 测试 方法 对 模 
块 内 部 路 径 进行 测试 。 在 集成 测试 阶段 ,使 用 白 盒 测 试 方法 的 目的 不 再 是 为 了 满足 一 定 
的 代码 覆盖 率 ,而 是 为 了 在 进行 黑 盒 测试 时 不 遗漏 应 有 的 功能 点 。 也 可 以 理解 为 ,这 一 阶 
段 的 白 盒 测 试 是 为 黑 盒 测试 服务 的 。 

集成 测试 阶段 使 用 的 测试 方法 可 理解 为 灰 盒 测 试 方法 。 下 面 简单 介绍 灰 盒 测试 方法 。 

灰 盒 测试 是 一 种 介 于 黑 盒 测试 和 和 白 盒 测 试 之 间 的 测试 策略 , 它 基于 程序 运行 的 外 部 
表现 同时 又 结合 程序 内 部 逻辑 结构 来 设计 测试 用 例 。 灰 盒 测 试 与 黑 盒 测 试 一 样 ,关注 被 
测 对 象 的 输出 对 于 输入 的 正确 性 , 即 关注 其 能 否 完成 预期 的 功能 ,而 它 同时 也 关注 被 测 对 
象 的 内 部 结构 ,但 这 种 关注 不 像 白 盒 测 试 那样 详细 完整 ,而 是 有 选择 性 的 。 进 行 灰 盒 测 
试 需 花 费 比 黑 盒 测试 多 20% ~40% 的 时 间 。 

任何 项 目 都 会 从 灰 盒 测 试 中 获 益 。 不 管 是 手机 中 使 用 的 各 种 嵌入 式 软件 ,还 是 Web 
页 面 和 服务 器 端的 任何 脚本 ,都 可 以 运用 这 种 测试 方法 。 对 于 重要 的 项 目 , 尤 其 是 涉及 生 
命 或 重大 财产 安全 的 项 目 则 更 适合 于 使 用 这 种 测试 方法 。 

为 进行 灰 盒 测试 ,需要 安装 源 代 码 , 从 源 代 码 编译 生成 的 目录 中 运行 子 系统 或 系统 ， 
测试 人 员 应 熟悉 源 代码 或 具备 很 强 的 阅读 源 代码 的 能 力 , 还 应 配置 针对 编程 语言 的 代码 
覆盖 率 工具 。 

设计 灰 盒 测 试用 例 与 黑 盒 测 试用 例 的 主要 区 别 在 于 , 灰 盒 测试 用 例 的 粒度 超出 黑 盒 
测试 用 例 ,也 就 是 说 灰 盒 测试 用 例 不 仅仅 是 从 被 测 对 象 外 部 进行 测试 。 因 为 这 种 测试 用 
例 , 主 要 是 覆盖 需求 功能 点 ,每 个 功能 点 可 能 细 分 为 多 种 情况 ,而 且 需 求 功能 点 之 间 还 存 
在 组 合 的 情况 ,这 仅仅 依靠 黑 盒 测试 是 难以 实现 的 ,通过 覆盖 代码 中 的 路 径 则 容易 实现 这 
一 目标 ,这 在 很 大 程度 上 提高 了 测试 的 有 效 性 。 

灰 盒 测试 可 以 说 是 将 白 盒 测 试 和 黑 盒 测试 策略 的 优点 结合 起 来 ,其 主要 优点 如 下 : 

。 能够 进行 基于 需求 的 覆盖 测试 ( 即 履 盖 功能 点 ) 和 基于 路 径 的 覆盖 测试 。 

。 可 深入 被 测 对 象 的 内 部 ,便于 错误 的 定位 、 分 析 和 解决 。 

。 能 够 保证 设计 的 黑 盒 测试 用 例 的 完整 性 ,防止 功能 或 功能 组 合 的 遗漏 。 

。 能 够 减 小 需求 或 设计 不 详细 或 不 完整 对 测试 造成 的 影响 。 


6.2 集成 测试 的 实施 


1. 集成 测试 的 步骤 

为 成 功 地 实施 集成 测试 , 需 遵 循 一 定 的 步骤 。 集 成 测试 的 步骤 如 下 。 

(1) 计划 集成 测试 

确定 集成 测试 的 内 容 和 策略 ,安排 集成 测试 的 进度 .资源 .人 员 ,确定 测试 中 所 需 测试 
工具 及 硬件 设备 ,对 集成 测试 计划 进行 评审 。 

(2) 设计 集成 测试 

创建 集成 测试 环境 ,设计 集成 测试 用 例 , 细 化 测试 过 程 。 
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(3) 执行 集成 测试 

执行 集成 测试 ,并 记录 测试 过 程 和 发 现 的 错误 ,定位 并 排除 错误 ,必要 时 进行 回归 
测试 。 

(4) 分 析 测 试 结果 并 提交 测试 报告 

对 集成 测试 的 结果 进行 分 析 、 归 类 ,判断 集成 测试 的 完备 性 ,编制 并 提交 集成 测试 
报告 。 

2. 集成 测试 计划 的 编制 

集成 测试 与 单元 测试 不 同 ,单元 测试 是 对 单个 模块 的 测试 ,被 测 单元 的 规模 小 ,多 个 
模块 的 单元 测试 可 同时 进行 ,无 所 谓 顺序 ;但 集成 测试 是 一 个 对 模块 边 集成 边 测试 的 过 
程 ,特别 讲求 对 测试 过 程 的 精心 计划 。 

在 制定 集成 测试 计划 时 ,应 主要 考虑 如 下 因素 : 

。 测试 的 内 容 ; 

。 集成 测试 中 的 系统 集成 方式 ; 

。 集成 测试 过 程 中 连接 各 模块 的 顺序 ; 

。 模块 代码 编制 和 测试 进度 是 否 与 集成 测试 的 顺序 一 致 ; 

。 测试 过 程 中 需要 的 测试 工具 及 硬件 设备 。 

3. 集成 测试 完成 的 标志 

集成 测试 完成 的 标志 如 下 : 

(1) 成 功 地 执行 集成 测试 计划 中 规定 的 所 有 测试 。 

(2) 修正 了 集成 测试 中 发 现 的 错误 。 

(3) 测试 结果 通过 了 专门 小 组 的 评审 。 


6.3 ”集成 测试 的 策略 


集成 测试 的 策略 将 直接 影响 集成 测试 用 例 的 设计 测试 工具 的 选择 、 测 试 的 顺序 和 集 
成 测试 的 成 本 等 ,在 集成 测试 中 具有 极端 重要 性 。 
6.3.1 典型 的 集成 测试 策略 


1. 一 次 性 集成 方式 

一 次 性 集成 方式 又 称 为 大 爆炸 集成 (Big-Bang Integration) ,是 一 种 非 增殖 式 集成 方 
式 (Non-Incremental Integration) 。 该 小 节 中 介绍 的 其 他 集成 测试 策略 则 属于 增殖 式 集 
成 方式 (Incremental Integration ) 。 

一 次 性 集成 方式 的 策略 是 ,首先 分 别 对 每 个 模块 进行 单元 测试 ,然后 一 次 性 地 将 所 有 
模块 集成 在 一 起 ,并 对 它们 进行 测试 ,发 现 并 清除 在 模块 连接 过 程 中 出 现 的 问题 ,得 到 最 
终 要 求 的 软件 系统 。 

例如 ,有 一 个 软件 的 模块 结构 如 图 6-1(a) 所 示 , 其 单元 测试 和 集成 顺序 如 图 6-1(b) 
所 示 。 
在 图 6-1(b) 中 ,模块 d1,d2,d3,d4,d5 是 对 各 模块 实施 单元 测试 时 建立 的 驱动 模块 ， 
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图 6-1 一 次 性 集成 的 例子 


sl,s2,s3,s4,s5 则 是 为 各 模块 实施 单元 测试 建立 的 桩 模块 。 这 种 一 次 性 集成 方式 试图 在 
驱动 模块 和 桩 模块 的 辅助 下 ,一 次 性 地 将 通过 了 单元 测试 的 各 模块 集成 起 来 ,并 对 模块 的 
接口 进行 测试 。 

当 软 件 的 模块 数量 较 多 、 接 口 复杂 时 ,一 次 性 集成 方式 不 利于 定位 和 解决 发 现 的 问 
题 ,所 以 很 难 构造 成 一 个 成 功 的 最 终 系统 。 在 实际 应 用 中 ,该 方式 较 少 使 用 。 


2. 自 项 向 下 的 集成 方式 

自 顶 向 下 的 集成 方式 (Top-Down Integration) 根 据 软 件 的 模块 结构 图 , 按 控制 层次 
从 高 到 低 的 顺序 对 模块 进行 集成 ,也 就 是 从 最 顶层 模块 向 下 逐步 集成 ,并 在 集成 的 过 程 中 
进行 测试 ,直至 组 装 成 符合 要 求 的 最 终 软件 系统 。 

自 顶 向 下 的 集成 方式 的 测试 步 又 如 下 : 

Q@ 以 主 模块 为 被 测 模块 , 主 模块 的 直接 下 属 模块 则 用 桩 模块 代替 。 

@ 采用 深度 优先 或 宽度 优先 策略 ,用 实际 模块 替换 相应 的 桩 模块 (注意 每 次 仅 替 换 
一 个 或 少量 几 个 桩 模块 , 视 模块 接口 的 复杂 程度 而 定 ) ,它们 的 直接 下 属 模块 则 又 用 桩 模 
块 代替 ,与 已 测试 的 模块 或 子 系统 集成 为 新 的 子 系统 。 

@ 对 新 形成 的 子 系统 进行 测试 ,发 现 和 排除 模块 集成 过 程 中 引起 的 错误 ,并 做 回归 
测试 。 

@ 若 所 有 的 模块 都 已 集成 到 系统 中 , 则 结束 集成 ,否则 转 步 又 @。 

对 于 图 6-1(a) 所 示 的 模块 结构 图 ,图 6-2 给 出 了 对 其 采用 自 顶 向 下 增殖 方式 进行 集 
成 的 过 程 。 


测试 A s4| 加 入 B E| 加 入 E E 加 入 C 
A 
B||lc|[p B|[c|[pD 
E s5| 加 入 D E F | 加 入 F 


6-2 自 顶 向 下 集成 的 例子 ( 按 深度 方向 集成 ) 
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自 顶 向 下 的 集成 方式 主要 有 如 下 优点 : 
。 可 以 及 早 地 发 现 和 修复 模块 结构 图 中 的 主要 控制 点 存在 的 问题 ,以 减少 以 后 的 返 
工 , 因 为 在 一 个 模块 划分 合理 的 模块 结构 图 中 ,主要 的 控制 点 多 出 现在 较 高 的 控 
制 层 次 上 。 
能 较 早 地 验证 功能 的 可 行 性 。 
。 最 多 只 需 一 个 驱动 模块 ,减少 了 驱动 模块 的 开发 成 本 。 
支持 故障 隔离 。 如 某 模块 A 通过 了 测试 ,而 加 进 模块 B 后 ,测试 中 出 现 错误 , 则 
可 以 肯定 错误 处 于 模块 B 内 部 或 模块 A、B 的 接口 上 。 
自 顶 向 下 集成 方式 的 主要 缺点 如 下 : 
。 需要 开发 和 维护 大 量 的 桩 模块 。 
。 桩 模块 很 难 模拟 实际 子 模块 的 功能 ,而 涉及 复杂 算法 和 真正 输入 /输出 的 模块 一 
般 在 底层 ,它们 是 最 容易 出 问题 的 模块 ,到 组 装 的 后 期 才 测试 这 些 模块 ,一 旦 发 现 
问题 ,将 导致 大 量 的 回归 测试 。 
为 了 有 效 地 进行 集成 测试 ,软件 系统 的 控制 结构 应 具有 和 较 高 的 可 测试 性 。 
随 着 测试 的 逐步 推进 ,组装 的 系统 愈加 复杂 , 易 导 致 对 底层 模块 测试 的 不 够 充分 ， 
尤其 是 那些 被 复 用 的 模块 。 

在 实际 使 用 中 , 自 项 向 下 的 集成 方式 很 少 单独 使 用 ,这 是 因为 该 方法 需要 开发 大 量 的 
桩 模块 ,增加 了 集成 测试 成 本 ,违背 了 应 尽量 避免 开发 桩 模块 的 原则 。 但 在 某 些 情况 下 ， 
也 可 考虑 使 用 该 集成 方式 ,例如 

。 软件 的 控制 结构 具有 较 大 的 技术 风险 , 需 较 早 得 到 测试 ; 

。 在 极限 编程 中 使 用 探索 式 开发 风格 。 注 意 ,该 方法 要 求 测试 人 员 在 全 部 软件 单元 

实现 之 前 完成 核心 软件 部 件 的 集成 测试 。 


3. 自 底 向 上 的 集成 方式 

自 底 向 上 的 集成 方式 (Down-Top Integration) 根 据 软件 的 模块 结构 图 , 按 控制 层次 
从 低 到 高 的 顺序 对 模块 进行 集成 ,也 就 是 从 最 底层 模块 向 上 逐步 集成 ,在 集成 的 同时 进行 
测试 ,直至 组 装 成 符合 要 求 的 最 终 软件 系统 。 

因为 是 自 底 向 上 进行 组 装 ,对 于 一 个 给 定 层次 的 模块 , 它 的 所 有 下 属 模块 已 经 组 装 并 
测试 完成 ,所 以 不 再 需要 桩 模块 。 

自 底 向 上 集成 方式 的 测试 步骤 如 下 : 

@ 为 最 底层 模块 (叶子 模块 ) 开 发 驱动 模块 ,对 最 底层 模块 进行 测试 ,最 底层 模块 之 
间 的 测试 可 并 行 。 也 可 将 两 个 或 多 个 最 底层 模块 (模块 数目 视 模块 复杂 程度 而 定 ) 合 并 到 
一 起 作为 被 测 模块 ,或 将 仅 有 一 个 叶子 模块 的 父 模块 与 叶子 合并 到 一 起 做 被 测 模块 ,为 之 
开发 驱动 模块 ,进行 测试 。 

@ 用 实际 模块 替换 驱动 模块 ,与 其 直属 子 模块 (已 被 测试 过 ) 集 成 为 一 个 子 系统 。 

@@ 为 新 形成 的 子 系统 开发 驱动 模块 ( 若 新 形成 的 子 系统 对 应 为 主 控 模 块 , 则 不 必 开 
发 驱动 模块 ) ,对 该 子 系统 进行 测试 。 

@ 若 该 子 系统 已 对 应 为 主 控 模 块 , 即 最 高 层 模块 , 则 结束 集成 ,否则 转 步 又 四 。 

对 于 图 6-1(a) 所 示 的 软件 模块 结构 图 ,图 6-3 表示 了 对 其 进行 自 底 向 上 集成 的 过 程 。 


软件 测试 


自 底 向 上 集成 方式 的 主要 优点 如 下 ， 

。 大 大 减少 了 桩 模块 的 开发 (但 为 了 模拟 一 

些 中 断 和 异常 ,可 能 仍 需 设计 少量 桩 模 [Ej] [S] [F] 巴 ] 巴 ] [BB] [Cj] [5 

块 ) ,虽然 需要 开发 大 量 的 驱动 模块 ,但 其 | Fp] [E F 

开发 成 本 毕竟 比 开 发 桩 模块 的 成 本 要 小 。 

涉及 复杂 算法 和 真正 输入 /输出 的 模块 往 

往 在 底层 ,它们 是 最 容易 出 现 问题 的 模 

块 ,最 先 对 底层 模块 进行 测试 ,减少 了 回归 测试 的 成 本 。 当 然 , 若 在 集成 测试 后 其 

又 对 底层 模块 进行 修改 , 则 必须 对 其 上 层 模块 进行 回归 测试 ,但 这 样 的 情况 毕竟 

是 少数 。 

。 在 集成 的 早期 很 可 能 实现 对 模块 的 并 行 测试 ,这 提高 了 集成 测试 的 效率 。 

。 支 持 故障 隔离 。 

自 底 向 上 集成 方式 的 主要 缺点 如 下 ， 

。 需 开发 大 量 的 驱动 模块 , 故 带 来 一 定 的 测试 成 本 。 但 通过 对 底层 模块 的 复 用 可 以 
减少 驱动 模块 的 开发 。 

。 不 能 及 早 地 发 现 和 修复 模块 结构 中 的 主要 控制 点 存在 的 问题 ,在 集成 的 后 期 修复 
此 类 问题 将 花费 较 大 的 成 本 ,故此 法 不 适合 于 那些 控制 结构 对 整个 体系 至 关 重要 
的 软件 产品 。 

。 随 着 测试 的 逐步 推进 ,组 装 的 系统 愈加 复杂 ,对 底层 模块 的 异常 很 难 测试 到 。 

在 实际 的 使 用 中 , 自 底 向 上 集成 方式 比 自 项 向 下 集成 方式 应 用 更 广泛 ,尤其 是 在 如 下 


dl] [dz] [8] [4| [ds A 


图 6-3 自 底 向 上 的 集成 方式 


场合 ,更 应 使 用 自 底 向 上 的 集成 方式 。 


(1) 软件 的 高 层 接口 变化 较 频繁 ,可 测试 性 不 强 。 
(2) 软件 的 底层 接口 较 稳 定 。 


4, 混合 式 集成 方式 
这 种 集成 测试 策略 结合 了 自 顶 向 下 集成 方式 和 自 底 向 上 集成 方式 的 优点 ,在 对 一 个 


软件 的 集成 测试 过 程 中 ,综合 地 使 用 此 两 种 集成 方案 。 例 如 首先 对 含有 输入 /输出 模块 和 
引入 新 算法 模块 等 关键 模块 的 子 系统 进行 自 底 向 上 的 组 装 和 测试 ,然后 由 主 模块 开始 自 
顶 向 下 进行 测试 。 又 如 首先 对 含 读 操作 的 子 系统 自 底 向 上 直至 根 结 点 模块 进行 组 装 和 测 
试 ,然后 对 含 写 操作 的 子 系统 做 自 顶 向 下 的 组 装 与 测试 。 


5. 核心 系统 先行 集成 方式 
该 方式 的 思想 是 先 对 核心 软件 部 件 进行 集成 测试 ,在 此 基础 上 再 按 各 外 围 软件 部 件 


的 重要 程度 逐个 集成 到 核心 系统 中 。 每 次 加 入 一 个 外 围 软 件 部 件 都 产生 一 个 产品 基线 ， 
直至 最 后 形成 稳定 的 软件 产品 。 核 心 系 统 先行 集成 方式 对 应 的 集成 过 程 是 一 个 逐渐 趋 于 
闭合 的 螺旋 形 曲线 ,代表 产品 逐步 定型 的 过 程 。 


核心 系统 先行 集成 方式 的 步骤 如 下 : 
吕 保证 核心 系统 中 的 每 个 模块 都 已 经 通过 单元 测试 。 
@ 对 于 核心 系统 中 的 所 有 模块 一 次 性 集合 到 被 测 系 统 中 ,解决 集成 中 出 现 的 各 类 问 
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题 。 在 核心 系统 规模 相对 较 大 的 情况 下 ,可 以 采用 自 底 向 上 的 策略 ,集成 核心 系统 的 各 
模块 。 

@ 按照 各 外 围 软件 部 件 的 重要 程度 及 模块 间 的 相互 制约 关系 ,确定 外 围 软 件 部 件 集 
成 到 核心 系统 中 的 顺序 。 

@ 在 外 围 软件 部 件 集成 到 核心 系统 之 前 ,应 首先 对 外 围 软件 部 件 内 部 各 模块 完成 集 
成 测试 。 

@@ 按 顺 序 不 断 加 入 外 围 软件 部 件 , 排 除外 围 软件 部 件 集成 中 出 现 的 问题 ,最 终 形成 
可 正常 运行 的 目标 系统 。 

一 般 说 来 ,核心 系统 先行 集成 方式 是 一 种 混合 式 集成 方式 ,也 就 是 既 用 到 了 自 项 向 下 
的 集成 方式 ,也 用 到 了 自 底 向 上 的 集成 方式 ,以 充分 利用 两 者 的 优点 。 

该 集成 方式 对 于 快速 软件 开发 很 有 效果 ,适合 较 复 杂 系 统 的 集成 测试 ,能 保证 一 些 重 
要 功能 的 实现 。 

核心 系统 先行 集成 方式 的 缺点 是 被 测 软件 一 般 必 须 具 有 如 下 特点 方 能 使 用 此 法 : 能 
明确 区 分 核心 软件 部 件 和 外 围 软件 部 件 ; 核 心软 件 部 件 内 部 各 模块 具有 较 紧密 的 关系 ;外 
围 软件 部 件 内 部 也 具有 较 紧密 的 关系 ;而 各 外 围 软 件 部 件 之 间 具 有 较 低 的 耦合 度 。 


6. 高 频 集成 方式 

高 频 集成 (High-frequency Integration) 方 式 是 指 同 步 于 软件 开发 过 程 ,每 隔 一 段 时 
间 对 开发 团队 的 现 有 代码 进行 一 次 集成 测试 。 例 如 某 些 自动 化 集成 测试 工具 能 实现 每 日 
深夜 对 开发 团队 的 现 有 代码 进行 一 次 集成 测试 ,然后 将 测试 结果 发 到 各 开发 人 员 的 电子 
信箱 中 。 该 集成 测试 方法 频繁 地 将 新 代码 加 入 到 一 个 已 经 稳定 的 基线 中 ,以 发 现 集成 中 
的 故障 ,同时 控制 可 能 出 现 的 基线 偏差 。 

高 频 集成 方式 需 具备 一 定 的 执行 条 件 如 下 : 

(1) 可 以 持续 获得 一 个 稳定 的 增 量 ,并 且 该 增 量 内 部 已 经 验证 没有 问题 。 

(2) 大 部 分 有 意义 的 功能 增加 可 以 在 一 个 相对 稳定 的 时 间 间 隔 ( 如 每 个 工作 日 ) 内 
获得 。 

(3) 测试 包 和 代码 的 开发 工作 必须 是 并 行进 行 的 ,并 且 需 要 版 本 控制 工具 来 保证 始 
终 维护 的 是 测试 脚本 和 代码 的 最 新 版 本 。 

(4) 由 于 高 频 集 成 的 集成 次 数 频繁 ,必须 借助 于 自动 化 工具 来 完成 。 

高 频 集成 方式 的 步骤 如 下 : 

| 选择 集成 测试 自动 化 工具 。 例 如 很 多 Java 项 目 采 用 JUnit 和 Ant 进行 增 量 开发 ， 
实现 集成 测试 的 自动 化 。 

四 设置 版 本 控制 工具 ,以 确保 集成 测试 自动 化 工具 所 获得 的 版 本 是 最 新 版 本 。 例 如 
使 用 CVS 进行 版 本 控制 。 

@ 测试 人 员 和 开发 人 员 负 责编 写 对 应 程序 代码 的 测试 脚本 。 

@ 设置 自动 化 集成 测试 工具 .每 隔 一 段 时 间 对 配置 管理 库 的 新 添加 的 代码 进行 自动 
化 的 集成 测试 ,并 将 测试 报告 汇报 给 开发 人 员 和 测试 人 员 。 

加 测试 人 员 监 督 代码 开发 人 员 及 时 关闭 不 合格 项 。 

@ 重复 步骤 @ 一 @, 直 至 形成 最 终 软件 产品 。 


0 


和 2 软件 测试 
FA 高 频 集成 方式 的 优点 主要 如 下 : 


能 在 开发 过 程 中 及 时 发 现代 码 错误 ,尽早 搭建 一 个 可 运行 的 系统 ,以 直观 地 看 到 
开发 团队 的 进度 。 

测试 中 发 现 的 错误 很 可 能 存在 于 新 增 或 新 近 被 修改 的 代码 中 ,这 对 定位 并 修复 错 
误 很 有 益处 。 

开发 维护 源 代码 与 开发 维护 软件 测试 包 被 赋予 同 等 的 重要 性 ,这 对 有 效 防止 和 纠 
正 错误 都 很 有 利 。 

。 对 桩 模块 不 是 必须 的 ,减少 了 测试 成 本 。 

该 方案 的 缺点 如 下 : 

。 测试 包 有 时 候 过 于 简单 ,可 能 不 能 暴露 深层 次 的 编码 错误 和 图 形 界面 错误 。 

。 在 刚 开始 的 几 个 周期 可 能 不 易于 平稳 地 进行 集成 。 

高 频 集成 多 用 于 快速 欠 代 式 开发 或 增 量 式 开发 中 。 


7. 基于 消息 /事件 /线程 的 集成 方式 

对 于 许多 基于 状态 机 的 系统 ,如 嵌入 式 系统 ,面向 对 象 方式 开发 的 系统 ,模块 (如 类 、 
进程 ) 间 的 接口 主要 通过 消息 来 实现 ,因而 验证 消息 路 径 的 正确 性 在 这 类 软件 系统 的 集成 
测试 中 具有 重要 的 意义 。 集 成 测试 可 采用 基于 消息 /事件 /线程 的 集成 方式 (Message/ 
Event/Thread-Based Integration ) 。 

基于 消息 /事件 /线程 集成 方式 的 步骤 如 下 : 

Q@ 从 软件 系统 的 外 部 进行 分 析 ,确定 可 能 输入 的 消息 的 集合 。 

@ 选取 一 条 消息 ,分 析 其 穿越 的 所 有 模块 。 

@ 将 这 些 模 块 进行 集成 ,测试 消息 接口 。 

@ 选取 下 一 条 消息 ,重复 步骤 @@、@ ,直至 所 有 模块 都 被 集成 进来 。 

在 消息 集合 中 选取 一 条 消息 进行 接口 测试 时 ,可 从 以 下 几 方 面 考虑 : 

(1) 应 对 重要 的 消息 路 径 优先 进行 测试 。 

(2) 选取 的 消息 有 利于 新 模块 被 集成 进来 。 

(3) 选取 路 径 较 短 的 消息 ,以 有 效 地 对 消息 接口 进行 测试 。 


8. 基于 使 用 的 集成 方式 

在 面向 对 象 方式 开发 的 软件 系统 中 ,有 些 类 之 间 是 独立 的 ,而 有 些 类 之 间 具 有 依赖 关 
系 。 基 于 使 用 的 集成 (Use-Based Integration) 方 式 是 .首先 对 各 个 类 之 间 的 依赖 关系 进行 
分 析 ,测试 独 立 的 类 ( 指 几 乎 不 使 用 服务 器 的 类 ) ,然后 测试 使 用 一 些 服 务 器 的 类 ,再 逐步 
测试 具有 依赖 性 的 类 (即使 用 独立 类 的 类 ) ,直至 整个 系统 构造 完成 ,从 而 验证 类 之 间接 口 
的 正确 性 。 
6.3.2 集成 测试 策略 的 选取 

以 上 介绍 了 一些 常见 的 集成 测试 策略 ,一 般 来 讲 , 一 次 性 集成 多 方式 用 于 系统 规模 较 
小 的 测试 项 目 ; 自 顶 向 下 集成 ( 较 少 被 使 用 )、 自 底 向 上 集成 和 混合 式 集成 方式 则 多 用 于 采 
用 结构 化 方法 开发 的 软件 项 目 ; 基 于 消息 /事件 /线程 的 集成 方式 用 于 艇 入 式 系统 ` 面 向 对 
象 方式 开发 的 系统 ,基于 使 用 的 集成 方式 用 于 面向 对 象 系统 ;核心 系统 先行 集成 方式 和 高 
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频 集 成 方式 , 则 是 广泛 地 被 使 用 于 许多 复杂 软件 项 目的 集成 测试 过 程 。 

在 实际 的 测试 项 目 中 ,使 用 的 集成 测试 策略 一 般 不 是 单一 的 ,应 结合 软件 项 目的 具体 
特点 和 开发 环境 合理 地 选择 集成 测试 策略 ,以 充分 发 挥 各 种 方式 的 优点 。 
6.3.3 模块 和 接口 的 确定 


模块 的 划分 是 在 概要 设计 阶段 就 应 该 完成 的 工作 ,但 在 集成 测试 阶段 ,还 应 当 从 可 测 
试 性 的 角度 进一步 确定 被 测 模块 及 接口 。 选 定 的 被 测 模块 和 接口 将 直接 影响 集成 测试 的 
工作 量 .进度 和 效果 。 

为 确定 需 集成 的 被 测 模块 ,可 按 以 下 思路 进行 : 

QO 确定 当前 主要 希望 测试 的 模块 。 

@ 确定 与 该 模块 关系 密切 的 模块 , 即 有 调用 关系 的 模块 ,可 按 关系 的 紧密 程度 排列 。 

@ 将 该 模块 与 关系 最 紧密 的 模块 进行 集成 。 

@ 再 依次 考虑 被 集成 模块 的 外 围 模 块 。 

在 集成 测试 中 ,较为 合理 的 模块 划分 应 具有 如 下 特点 : 

。 被 集成 的 模块 关系 紧密 ,能 共同 完成 某 些 功能 。 

。 外围 模块 便于 屏蔽 , 即 被 集成 模块 和 外 围 模块 的 调用 关系 尽 可 能 少 ,以 减少 驱动 

模块 和 桩 模块 的 编写 。 

。 外 围 模块 发 给 被 集成 模块 的 消息 能 模拟 大 部 分 情况 。 

。 模拟 外 围 模块 发 给 被 集成 模块 的 消息 便于 构造 和 修改 。 

集成 测试 是 在 一 定 的 时 间 ,资源 和 资金 约束 下 进行 的 ,不 可 能 对 软件 中 的 模块 和 接口 
进行 完全 无 遗漏 的 测试 。 应 首先 确定 关键 模块 ,尽早 对 关键 模块 及 其 接口 进行 测试 。 事 
实 上 ,软件 工程 中 的 2/8 原则 在 测试 中 是 同样 适用 的 , 即 测试 中 发 现 的 80% 的 错误 可 能 
位 于 软件 的 20% 区 域内 。 也 就 是 说 ,错误 往往 具有 群集 性 ,一 个 模块 在 测试 中 被 发 现 的 
错误 越 多 ,往往 意味 着 这 个 模块 还 可 能 有 更 多 未 被 发 现 的 错误 。 例 如 在 IBM OS/370 操 
作 系 统 中 ,47% 的 软件 故障 (用 户 在 使 用 中 发 现 的 ) 均 出 自 4% 的 软件 模块 。 

因此 ,对 关键 模块 的 确定 和 尽早 测试 是 提高 集成 测试 效率 的 有 效 途 径 , 集 成 测试 活动 
应 以 关键 模块 为 核心 展开 。 

关键 模块 是 具有 以 下 特征 之 一 的 模块 : 

。 能够 完成 需求 规格 说 明 中 的 关键 功能 。 

。 在 软件 模块 结构 中 处 于 较 高 的 层次 。 
有 明确 的 性 能 要 求 。 
， 被 频繁 使 用 ( 故 易 成 为 软件 性 能 的 瓶颈 )。 
对 于 非 关键 模块 ,可 在 后 期 对 它们 进行 一 次 性 集成 测试 。 


6.4 小 结 


集成 测试 在 软件 测试 中 占有 十 分 重要 的 地 位 ,一 般 说 来 ,集成 测试 花费 的 时 间 远 远 超 
过 单元 测试 。 集 成 测试 往往 是 一 个 持续 的 过 程 , 不 是 一 足 而 就 的 ,因而 在 执行 集成 测试 前 
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合理 地 对 其 进行 计划 ,尤其 是 根据 软件 项 目的 特点 选择 集成 测试 的 策略 ,对 于 集成 测试 的 
成 功 实施 有 重要 的 意义 。 

本 章 介 绍 的 主要 是 一 些 常规 的 集成 测试 策略 。 关 于 面向 对 象 系统 的 集成 测试 是 目前 
研究 的 热点 ,其 中 有 很 多 种 新 方法 或 思路 被 提出 。 在 本 章 对 此 涉及 很 少 ,将 在 第 8 章 中 详 
细 介 绍 。 


习 题 


. 简 述 集成 测试 的 作用 。 
. 为 什么 通过 了 单元 测试 的 单元 并 不 能 保证 在 集成 过 程 中 不 出 现 问 题 ? 
. 集成 测试 的 测试 对 象 是 什么 ? 
. 集成 测试 阶段 的 测试 用 例 设计 方 法 有 哪些 ? 
. 为 什么 自 顶 向 下 的 集成 测试 方式 很 少 单独 使 用 ? 
. 为 何在 自 底 向 上 集成 中 进行 回归 测试 的 成 本 远 小 于 自 顶 向 下 的 集成 ? 
. 自 底 向 上 集成 方式 的 优 缺点 分 别 是 什么 ? 
. 混合 式 集 成 方式 的 目的 是 什么 ? 
.高 频 集 成 方式 的 含义 是 什么 ? 一 般 适 用 于 何 种 场合 ? 
10. 面向 对 象 开 发 一 般 使 用 何 种 集成 测试 策略 ? 
11. 什么 是 关键 模块 ? 为 什么 应 尽早 对 关键 模块 及 其 接口 进行 测试 ? 


CoN 人 nor- 
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确认 测试 .系统 测试 和 验收 测试 


本 章 要 点 : 

。 确认 测试 的 任务 。 

。 确认 测试 活动 。 

。 系统 测试 的 任务 。 

。 主要 的 系统 测试 类 型 。 

。 人 性 能 测试 的 类 型 。 

。 人 性 能 测试 策略 。 

。 基于 Web 的 系统 测试 。 
。 回归 测试 的 任务 和 策略 。 
。 系统 测试 的 步 又 。 

。 验收 测试 的 概念 和 策略 。 


经 过 集成 测试 后 ,应 对 软件 产品 进行 最 后 阶段 的 测试 一 一 确认 测试 .系统 测试 和 验收 
测试 ,并 对 测试 中 发 现 的 缺陷 进行 必要 的 修复 , 方 能 将 软件 交付 用 户 使 用 。 在 这 一 章 ,将 
介绍 与 确认 测试 、 系 统 测试 及 验收 测试 相关 的 概念 和 策略 。 


7.1 确认 测试 的 概念 和 活动 


1. 确认 测试 的 概念 

经 过 集成 测试 后 ,软件 产品 已 基本 定型 。 确 认 测 试 (Validation Testing) 的 任务 是 验 
证 软件 的 功能 、 性 能 及 其 他 特性 是 否 达到 需求 规格 说 明 书 的 要 求 。 在 需求 规格 说 明 书 中 
描述 了 软件 中 用 户 可 见 的 所 有 属性 ,其 中 有 一 节 为 有 效 性 准则 , 它 就 是 软件 确认 测试 的 基 
础 。 在 测试 规格 说 明 书 (Test Specification) 中 , 则 会 对 需求 规格 说 明 中 的 要 求 做 进一步 
的 细 化 ,用 于 指导 确认 测试 的 进行 。 确 认 测 试 也 被 软件 开发 企业 称 为 合格 性 测试 。 

确认 测试 一 般 不 由 软件 开发 人 员 执 行 ,而 应 由 软件 企业 中 独立 的 测试 部 门 或 第 三 方 
测试 机 构 完成 。 
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2. 确认 测试 活动 

确认 测试 一 般 包 括 有 效 性 测试 和 软件 配置 复查 。 以 下 分 别 介绍 之 。 

(1) 有 效 性 测试 

有 效 性 测试 是 在 模拟 的 环境 下 ,通过 执行 黑 盒 测试 ,验证 被 测 软件 是 否 满足 需求 规格 
说 明 书 中 的 需求 。 需 求 规格 说 明 书 中 的 需求 是 多 方面 的 ,有 对 功能 的 需求 ,对 性 能 的 要 
求 , 对 文档 的 需求 ,以 及 对 其 他 特性 (如 安全 性 、 健 壮 性 ,兼容 性 等 ) 的 要 求 。 

为 进行 有 效 性 测试 ,应 拟订 测试 计划 ,详细 指明 要 执行 的 测试 种 类 测试 的 步骤 ,还 需 
要 编写 具体 的 测试 用 例 。 

在 执行 完 所 有 测试 用 例 后 ,应 对 本 次 测试 做 出 结论 。 结 论 分 为 以 下 两 种 : 

Q@ 测试 结果 与 预期 结果 相符 , 即 软件 的 功能 .性 能 及 其 他 特性 满足 需求 规格 说 明 书 
中 的 需求 , 即 通过 了 有 效 性 测试 。 

@ 测试 结果 与 预期 结果 不 相符 , 即 软件 的 功能 ,性 能 及 其 他 特性 未 能 满足 需求 规格 
说 明 书 中 的 需求 ,应 提交 一 份 问题 报告 。 

(2) 软件 配置 复查 

在 软件 工程 过 程 中 产生 的 所 有 信息 项 ,如 文档 报告 .程序 .表格 .数据 等 , 称 为 软件 配 
置 。 软 件 配置 复查 的 目的 是 保证 软件 配置 的 所 有 成 分 齐全 ,各 成 分 的 质量 都 符合 要 求 , 具 
有 维护 阶段 所 必需 的 细节 , 且 已 编排 好 分 类 目录 。 

在 确认 测试 的 过 程 中 ,应 严格 按照 用 户 手册 和 操作 手册 中 规定 的 使 用 步 又 ,检查 软件 
配置 是 否 齐 全 、 正 确 。 应 详细 记录 发 现 的 遗漏 或 不 正确 之 处 ,并 对 发 现 的 问题 进行 修复 。 


7.2 系统 测试 的 概念 和 类 型 


7.2.1 系统 测试 的 概念 


1. 系统 测试 的 含义 

最 终 得 到 的 软件 不 是 一 个 孤立 的 对 象 ,往往 是 作为 整个 目标 系统 (注意 前 文 所 说 的 系 
统 是 指 软件 系统 ,而 此 处 却 不 是 ) 的 一 个 组 成 元 素 而 存在 。 系 统 测试 (System Testing) 是 
将 已 经 通过 确认 测试 的 软件 作为 基于 整个 计算 机 系统 的 一 个 元 素 ,与 系统 中 其 他 所 有 元 
素 ( 包 括 硬件 、 外 设 、 网 络 、 系 统 软 件 、 支 持平 台 、 数 据 、 操 作 人 员 等 ) 结 合 在 一 起 ,在 实际 运 
行 环境 下 或 模拟 系统 运行 环境 下 ,测试 其 与 系统 中 其 他 元 素 能 否 实现 正确 地 连接 ,以 满足 
用 户 的 所 有 需求 。 

系统 测试 的 任务 是 通过 与 系统 的 需求 定义 比较 ,发 现 软件 与 系统 的 定义 不 符合 的 
地 方 。 

显然 ,系统 测试 已 超出 了 对 软件 进行 测试 的 范围 ,但 软件 在 整个 系统 中 往往 占据 重要 
的 位 置 ,软件 的 质量 对 系统 测试 的 成 功 与 否 有 极 大 的 影响 。 一 个 软件 能 够 顺利 地 通过 系 
统 测试 ,是 对 其 质量 的 最 佳 诠释 。 

与 确认 测试 一 样 ,系统 测试 一 般 不 由 软件 开发 人 员 执行 ,而 应 由 软件 企业 中 独立 的 测 
试 部 门 或 第 三 方 测试 机 构 完 成 。 
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系统 测试 阶段 使 用 黑 盒 方法 设计 测试 用 例 ,完成 对 整个 系统 的 测试 。 


2. 系统 测试 与 确认 测试 的 关系 

在 很 多 资料 中 ,确认 测试 被 认为 是 系统 测试 的 一 部 分 ,业界 也 常 将 确认 测试 并 入 系统 
测试 中 进行 讨论 。 从 广义 上 说 ,这 样 理解 是 可 以 的 ,但 狭义 的 系统 测试 却 与 确认 测试 有 着 
较 大 的 不 同 ,这 种 不 同 表现 为 : 确认 测试 一 般 以 功能 测试 为 主 ,而 在 系统 测试 中 ,一 般 以 
性 能 测试 为 主 , 如 压力 测试 .负载 测试 ,强度 测试 .容量 测试 等 都 属于 性 能 测试 。 
7.2.2 系统 测试 的 主要 类 型 

系统 测试 在 整个 测试 过 程 中 处 于 收尾 阶段 ,其 种 类 繁多 ,除了 功能 测试 外 ,主要 包括 
如 下 测试 类 型 。 


1. 性 能 测试 
性 能 测试 的 目的 是 检测 系统 在 一 定 的 工作 环境 中 ,能 否 达 到 预期 的 性 能 要 求 。 性 能 
测试 主要 关注 被 测 系统 的 事务 处 理 速率 和 响应 时 间 等 性 能 指标 。 例 如 ,压力 测试 和 负载 
测试 .疲劳 测试 .强度 测试 .容量 测试 等 都 是 常见 的 性 能 测试 类 型 。 下 面 分 别 进行 介绍 。 
(1) 压力 测试 和 负载 测试 
压力 测试 (Stress Testing) 是 改变 应 用 程序 的 输入 ,以 对 应 用 程序 施加 越 来 越 大 的 负 
载 ,通过 综合 分 析 交 易 执行 指标 和 资源 监控 指标 ,评测 和 评估 应 用 系统 在 不 同 负载 条 件 下 
的 性 能 的 行为 。 
压力 测试 的 目的 主要 体现 在 以 下 三 个 方面 : 
。 以 真实 的 业务 为 依据 ,选择 有 代表 性 的 关键 的 业务 操作 设计 测试 案例 ,以 评价 系 
统 的 当前 性 能 。 

。 当 扩 展 应 用 程序 的 功能 或 者 新 的 应 用 程序 将 要 被 部 署 时 ,压力 测试 帮助 确定 系统 
是 否 还 能 够 处 理 期 望 的 用 户 负 载 , 以 预测 系统 的 未 来 性 能 。 

。 通过 模拟 成 百 上 千 个 用 户 ,重复 执行 和 运行 测试 ,可 以 确认 性 能 瓶颈 ,获得 系统 能 
提供 的 最 大 服务 级 别 , 并 调整 应 用 以 优化 其 性 能 。 例 如 ,测试 一 个 Web 站 点 在 大 
量 的 负荷 下 , 何 时 系统 的 响应 会 退化 或 失败 。 

关于 负载 测试 (Load Testing) 和 压力 测试 的 区 别 , 人 们 的 说 法 不 尽 相 同 ,其 实 也 没有 
必要 去 深究 两 者 的 区 别 ,这 不 会 影响 实际 的 测试 效果 ,只 要 我 们 能 针对 具体 的 应 用 系统 和 
用 户 需求 制定 合理 、 全 面 、 详 尽 的 压力 (或 负载 测试 ) 方 案 。 

压力 测试 和 负载 测试 也 可 理解 为 并 发 性 能 测试 ,这 类 测试 最 常见 于 采用 联机 事务 处 
理 (OLTP) 方 式 的 数据 库 应 用 、Web 浏览 和 视频 点 播 等 系统 ,是 性 能 测试 中 的 重点 。 

下 面 来 看 一 个 电信 计 费 软件 的 例子 。 

每 个 月 市 话 交 费 的 高 峰 期 ,全 市 几 千 个 收费 网 点 同时 启动 。 收 费 过 程 一 般 分 为 两 步 ， 
首先 要 根据 用 户 给 出 的 电话 号 码 查询 出 其 当月 产生 费用 ,然后 收取 现金 并 将 此 用 户 修改 
为 已 交 费 状态 。 一 个 用 户 看 起 来 简单 的 两 个 步骤 .但 当成 百 上 千 的 终端 同时 执行 这 样 的 
操作 时 ,情况 就 大 不 一 样 了 ,如 此 众多 的 交易 同时 发 生 , 对 应 用 程序 本 身 、 操 作 系统 .中 心 
数据 库 服 务 器 .中 间 件 服务 器 、 网 络 设 备 的 承受 力 都 是 一 个 严峻 的 考验 。 若 该 电信 计 费 软 
件 在 使 用 过 程 中 不 能 达到 应 有 的 性 能 或 是 因 负 载 过 大 而 发 生性 能 急剧 下 滑 , 则 会 给 缴费 
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者 和 操作 人 员 带 来 麻烦 ,同时 给 电信 部 门 带 来 收益 的 损失 。 因 而 必须 在 该 应 用 系统 投放 
前 就 进行 严格 的 负载 测试 。 预 先知 道 了 应 用 系统 能 承受 的 最 大 负荷 ,就 为 最 终 用 户 规划 
整个 运行 环境 的 配置 提供 了 有 力 的 依据 ,以 避免 不 必要 的 损失 。 

用 人 工 方法 进行 负载 测试 是 不 切实 际 的 , 且 无 法 捕捉 到 应 用 程序 内 部 的 变化 情况 。 
负载 测试 主要 是 通过 测试 工具 完成 的 ,也 就 是 进行 自动 负载 测试 , 即 通过 在 一 台 或 几 台 
PC 机 上 模拟 成 百 或 上 千 个 虚拟 用 户 同 时 执行 业务 的 情形 ,对 应 用 系统 进行 测试 ,同时 记 
录 下 每 一 事务 处 理 的 时 间 、 中 间 件 服务 器 峰值 数据 、 数 据 库 状 态 等 。 通 过 执行 可 重复 的 、 
尽量 接近 实际 使 用 环境 的 测试 ,测量 和 分 析 应 用 系统 的 可 扩展 性 和 性 能 ,确定 性 能 瓶颈 ， 
以 优化 系统 性 能 。 

执行 负载 测试 的 准备 工作 主要 如 下 。 

@ 建立 测试 环境 。 建 立 测试 环境 是 测试 实施 的 必要 前 提 , 测 试 环境 的 适合 与 否 会 严 
重 影响 测试 结果 的 真实 性 和 正确 性 。 

测试 环境 包括 硬件 环境 和 软件 环境 ,硬件 环境 指 测试 所 必须 的 服务 器 、 客 户 端 网络 
连接 设备 ,以 及 打印 机 /扫描 仪 等 辅助 硬件 设备 所 构成 的 环境 ;软件 环境 指 被 测 软 件 运行 
时 的 操作 系统 数据 库 及 其 他 应 用 软件 构成 的 环境 。 

一 个 充分 准备 好 的 测试 环境 应 具备 以 下 三 个 特点 : 

。 稳 定 、 可 重复 的 测试 环境 ,能 够 保证 测试 结果 的 准确 ; 

。 保证 达到 测试 执行 的 技术 需求 ; 

。 能 保证 测试 结果 的 易 理解 性 。 

@ 选择 或 开发 测试 工具 。 负 载 测试 是 在 客户 端 执行 的 黑 盒 测 试 。 目 前 有 很 多 测试 
工具 可 用 于 负载 测试 ,包括 商业 性 的 和 免费 的 ,当然 也 可 以 组 织 人 员 自行 开发 。 关 于 自动 
化 负载 测试 工具 ,将 在 第 9 章 介 绍 。 

负载 测试 工具 可 以 在 整个 开发 生命 周期 ,跨越 多 种 平台 自动 地 执行 测试 任务 ,模拟 
成 百 上 千 用 户 并 发 执行 关键 业务 ,从 而 完成 对 应 用 系统 的 测试 。 选 择 负载 测试 工具 的 依 
据 主 要 是 测试 需求 和 性 能 价格 比 。 

@ 准备 测试 数据 。 在 初始 的 测试 环境 中 需要 输入 一 些 适 当 的 测试 数据 ,目的 是 识别 
数据 状态 并 验证 用 于 测试 的 测试 案例 ,在 正式 的 测试 开始 以 前 对 测试 案例 进行 调试 ,将 正 
式 测 试 开 始 时 的 错误 降 到 最 低 。 在 测试 进行 到 关键 过 程 环节 时 ,非常 有 必要 进行 数据 状 
态 的 备份 。 制 造 初始 数据 意味 着 将 合适 的 数据 存储 下 来 ,在 需要 的 时 候 恢 复 它 ,初始 数据 
提供 了 一 个 基线 (基线 配置 又 称 基 准 配置 ,它们 是 经 过 阶段 评审 后 的 软件 配置 成 分 ) 用 来 
评估 测试 执行 的 结果 。 

在 测试 正式 执行 时 ,还 需要 准备 业务 测试 数据 ,如 测试 并 发 查询 业务 就 要 求 对 应 的 数 
据 库 和 表 中 有 相当 的 数据 量 及 数据 的 种 类 应 能 覆盖 全 部 业务 。 

采用 自动 化 负载 测试 工具 执行 的 并 发 性 能 测试 ,基本 测试 过 程 如 下 : 

@ 确定 测试 需求 ,测试 内 容 。 

@ 制定 测试 案例 。 

@ 配置 测试 环境 

@ 测试 脚本 录制 、 编 写 与 调试 ,制定 脚本 分 配 、 回 放 配置 与 加 载 策略 。 
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Q@ 执行 并 跟踪 测试 。 

@ 分 析 测 试 结果 ,定位 问题 ,完成 测试 报告 和 评估 。 

负载 测试 (或 并 发 性 能 测试 ) 监 控 的 对 象 不 同 ,测试 的 主要 指标 也 不 相同 ,主要 的 测试 
指标 包括 交易 处 理性 能 指标 和 UNIX 资源 监控 。 其 中 ,交易 处 理性 能 指标 包括 交易 结 
果 ,每 分 钟 交易 数 .交易 响应 时 间 (Min: 最 小 服务 器 响应 时 间 ; Mean: 平均 服务 器 响应 时 
间 ;Max: 最 大 服务 器 响应 时 间 ;StdDev: 事务 处 理 服务 器 响应 的 偏差 ;Median: 中 值 响应 
时 间 ;90%: 90% 事 务 处 理 的 服务 器 响应 时 间 ) 和 虚拟 并 发 用 户 数 。 

(2) 疲劳 测试 

疲劳 测试 (或 称 疲劳 强度 测试 ) 是 采用 系统 稳定 运行 情况 下 能 够 支持 的 最 大 并 发 用 户 
数 。 持 续 执 行 一 段 时 间 业 务 ,通过 综合 分 析 交 易 执行 指标 和 资源 监控 指标 可 以 确定 系统 
处 理 最 大 业务 量 时 的 性 能 。 疲劳 测试 的 主要 目的 是 测试 系统 的 稳定 性 ,同时 它 也 是 对 应 
用 系统 并 发 性 能 的 测试 。 

介绍 了 压力 (负载 ) 测 试 和 疲劳 测试 的 概念 后 ,来 看 一 个 某 通信 社 多 媒体 数据 库 
V 1.0 并 发 性 能 测试 的 实例 。 

某 软 件 评测 中 心 根据 某 通 信 社 技术 局 提出 的 4 多 媒体 数据 库 ( 一 期 ) 性 能 测试 需求 》 和 
GB/T 17544( 软 件 包 质 量 要 求 和 测试 ) 国 家 标准 ,使 用 工业 标准 级 负载 测试 工具 对 该 社 使 
用 的 多 媒体 数据 库 V1.0 进行 了 性 能 测试 。 

Q 性 能 测试 的 目的 。 模 拟 多 用 户 并 发 访问 该 多 媒体 数据 库 ,执行 关键 检索 业务 ,分 
析 系 统 性 能 。 

@ 性 能 测试 的 重点 。 针 对 系统 并 发 压力 较 大 的 主要 检索 业务 ,进行 负载 测试 和 疲劳 
测试 ,系统 采用 B/S 运行 模式 。 负 载 测试 设计 了 特定 时 间 段 内 分 别 在 中 文库 .英文 库 、 图 
片 库 中 进行 单 检索 词 .多 检索 词 ,以 及 变 检索 式 、 混 合 检索 业务 等 并 发 测试 案例 。 疲 劳 测 
试 案例 为 在 中 文库 中 并 发 用 户 数 200 ,进行 测 试 周期 约 8 小 时 的 单 检索 词 检索 。 在 进行 
负载 测试 和 疲劳 测试 的 同时 ,监测 的 测试 指标 包括 交易 处 理性 能 及 UNIX (Linux)， 
Oracle,Apache 资源 等 。 

@ 测试 结果 。 在 该 通信 社 机 房 测试 环境 和 内 网 测试 环境 中 ,100Mbps 带宽 情况 下 ， 
针对 规定 的 各 并 发 性 能 测试 案例 ,系统 能 够 承受 并 发 用 户 数 为 200 的 负载 压力 ,每 分 钟 最 
大 交易 数 达 到 78. 73 ,运行 基本 稳定 。 但 随 着 负载 压力 增 大 ,系统 性 能 有 所 衰减 。 

系统 能 够 承受 200 并 发 用 户 数 持续 周期 约 8 小 时 的 疲劳 压力 ,基本 能 够 稳定 运行 。 

通过 对 系统 UNIX(Linux) ,Oracle 和 Apache 资源 的 监控 ,系统 资源 能 够 满足 上 述 负 
载 压力 和 疲劳 性 能 需求 , 且 系统 硬件 资源 尚 有 较 大 利用 余地 。 

当 并 发 用 户 数 超过 200 时 ,监控 到 HTTP 500 .连接 和 超时 错误 , 且 Web 服务 器 报 内 

@ 建议 。 进 一 步 优 化 软件 系统 ,充分 利用 硬件 资源 .缩短 交易 响应 时 间 ,支持 更 大 并 
发 用 户 数 。 

(3) 强度 测试 

强度 测试 (Intensity Testing) 的 目的 是 找 出 因 资 源 不 足 或 资源 争 用 而 导致 的 错误 。 
如 果 内 存 或 磁盘 空间 不 足 , 测 试 对 象 就 可 能 会 表现 出 一 些 在 正常 条 件 下 并 不 明显 的 缺陷 ; 
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而 其 他 缺陷 则 可 能 是 由 于 争 用 共享 资源 (如 数据 库 锁 或 网 络 带宽 ) 造 成 的 。 强 度 测试 还 可 
用 于 确定 测试 对 象 能 够 处 理 的 最 大 工作 量 。 

强度 测试 和 压力 测试 的 测试 指标 相近 ,大 多 都 是 与 时 间 相 关 的 指标 ,如 响应 时 间 、 事 
务 处 理 速 率 等 。 

(4) 容量 测试 

容量 测试 (Volume Testing) 通 常 与 数据 库 有 关 , 其 目的 在 于 使 系统 承受 超额 的 数据 
容量 来 确定 系统 的 容量 瓶颈 (如 同时 在 线 的 最 大 用 户 数 ) ,进而 优化 系统 的 容量 处 理 能 力 。 

容量 测试 的 步骤 如 下 : 

Q@ 分 析 系 统 的 外 部 数据 源 ,并 进行 分 类 。 

@ 分 析 系 统 对 每 类 数据 源 的 容量 限制 。 

@ 根据 分 析 结 果 , 为 每 类 数据 源 构造 相应 的 大 容量 数据 对 系统 进行 测试 。 

@ 分 析 测 试 结果 ,确定 系统 的 容量 瓶颈 。 

@ 对 系统 进行 优化 ,并 重复 执行 步骤 @ 一 @ ,直至 达到 预期 的 容量 处 理 能 力 。 

比如 ,在 电子 商务 系统 中 ,通过 往 user 表 中 插入 10000 数据 ,看 其 是 否 可 以 正常 显示 
顾客 信息 列表 页 面 。 如 果 要 求 达 到 最 多 可 以 处 理 100000 个 客户 ,但 是 顾客 信息 列表 页 面 
不 能 够 在 规定 的 时 间 内 显示 出 来 ,就 需要 调整 程序 中 的 SQL 查询 语句 ;如 果 在 规定 的 时 
间 内 显示 出 来 ,可 以 将 用 户 数 分 别提 高 到 20000, 50000, 100000 进行 测试 ,以 找到 系统 的 
容量 瓶颈 。 


2. 安全 性 测试 

安全 性 测试 (Security Testing) 的 目的 在 于 检测 软件 系统 对 非法 侵入 的 防范 能 力 。 
它 是 通过 模拟 软件 真实 运行 环境 下 攻击 者 的 操作 行为 ,如 通过 力图 截取 或 破译 系统 的 口 
令 、 破 坏 系 统 的 保护 机 制 . 导 致 系统 出 现 故 障 并 在 系统 恢复 过 程 中 企图 非法 进入 .通过 浏 
览 非 保密 数据 以 试图 推导 所 需 的 保密 信息 等 来 寻找 软件 架构 中 不 合理 之 处 和 编码 的 安全 
隐患 。 安 全 性 测试 包括 验证 输入 数据 ` 破 解 加 密 和 访问 敏感 数据 ,缓冲 区 溢出 ` 授 权 和 证 
书 功能 等 。 

从 理论 上 说 ,只 要 拥有 足够 的 时 间 和 资源 ,任何 系统 都 是 可 以 进入 的 。 所 以 ,通过 安 
全 性 测试 及 采取 相应 的 措施 后 ,应 使 非法 侵入 软件 系统 的 代价 大 于 被 保护 信息 的 价值 ,使 
非法 侵入 者 得 不 偿 失 。 


3. 健壮 性 测试 

健壮 性 是 指 在 异常 情况 下 ,软件 能 继续 正常 运行 的 能 力 。 健 壮 性 有 两 层 含义 , 一 是 
容错 能 力 , 二 是 恢复 能 力 。 因 而 健壮 性 测试 (Robustness Testing) 包 括 容错 性 测试 和 恢复 
性 测试 。 

(1) 容错 性 测试 

进行 容错 性 测试 (Fault Tolerance Testing) 时 ,通常 构造 一 些 不 合理 的 输入 来 引诱 软 
件 出 错 ,观察 其 能 否 继续 正常 工作 。 例 如 ,输入 不 合理 的 月 份 ,输入 与 数据 类 型 要 求 不 符 
的 数据 ;又 如 在 测试 C/S 模式 的 软件 时 ,把 网 络 线 拔 掉 造 成 通信 异常 中 断 等 。 
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(2) 恢复 性 测试 

恢复 性 测试 (Recoverability Testing) 的 含义 是 将 系统 置 于 极端 条 件 下 (或 者 是 模拟 
的 极端 条 件 下 ) ,迫使 其 发 生 故障 (如 设备 1/O 故障 或 无 效 的 数据 库 指针 和 关键 字 ) ,检测 
系统 恢复 正常 工作 状态 的 能 力 。 

若 系统 能 自动 进行 恢复 ,应 检查 的 项 目 包 括 : 重新 初始 化 ,检验 点 设置 机 构 、 数 据 恢 
复 及 重新 启动 ; 若 需 人 工 干 预 进行 恢复 ,还 需 测 试 系统 的 平均 修复 时 间 ,判断 其 是 否 在 限 
定 的 时 间 范 围 内 。 

恢复 性 测试 还 需 对 系统 的 故障 转移 能 力 进行 评判 。 故 障 转移 指 当 主机 软 硬 件 发 生 故 
障 时 ,备份 机 器 能 及 时 启动 ,使 系统 继续 正常 运行 ,以 避免 丢失 任何 数据 或 事务 。 这 对 于 
电信 ,银行 等 领域 处 理 重要 事务 的 软件 是 十 分 重要 的 。 


4. 可 靠 性 测试 

可 靠 性 (Reliability) 是 指 在 一 定 的 环境 下 ,系统 不 发 生 故 障 的 概率 。 由 于 软件 不 像 硬 
件 那样 可 以 加 速 老 化 ,软件 可 靠 性 测试 (Reliability Testing) 可 能 会 花费 很 长 时 间 。 

为 解决 这 一 问题 ,比较 实用 的 方法 是 让 用 户 使 用 系统 ,记录 每 一 次 发 生 故 障 的 时 刻 。 
计算 出 相 邻 故障 的 时 间 间 隔 (注意 去 除非 工作 时 间 )。 这 样 便 可 以 方便 地 统计 出 不 发 生 故 
障 的 最 小 时 间 间 隔 、 最 大 时 间 间 隔 和 平均 时 间 间 隔 。 其 中 ,平均 时 间 间 隔 也 可 称 为 平均 无 
故障 时 间 ,在 很 大 程度 上 代表 了 软件 系统 的 可 靠 性 。 


5. 配置 测试 和 兼容 性 测试 

兼容 性 测试 (Compatibility Testing) 有 时 也 被 称 为 配置 测试 (Configuration 
Testing) ,但 它们 的 含义 略 有 不 同 。 一 般 说 来 ,配置 测试 的 目的 是 保证 软件 在 其 相关 的 硬 
件 上 能 够 正常 运行 ,而 兼容 性 测试 主要 是 测试 软件 能 否 与 其 他 软件 协作 运行 。 

配置 和 兼容 性 测试 通常 对 开发 系统 类 软件 比较 重要 ,如 驱动 程序 操作 系统 数据库 
管理 系统 等 。 

配置 测试 的 核心 内 容 就 是 使 用 各 种 硬件 来 测试 软件 的 运行 情况 ,一 般 包括 如 下 ， 
软件 在 安装 不 同类 型 CPU 的 机 器 上 的 运行 情况 。 
软件 在 安装 不 同 厂商 的 浏览 器 时 的 运行 情况 。 
软件 在 不 同 组 件 上 的 运行 情况 ,例如 开发 的 拨号 程序 要 测试 在 不 同 厂商 生产 的 
Modem 上 的 运行 情况 。 
不 同 的 外 设 。 
不 同 的 接口 。 
。 不 同 的 可 选项 ,如 不 同 的 内 存 容 量 等 。 
兼容 性 测试 的 核心 内 容 如 下 : 
。 软件 是 否 能 在 不 同 的 操作 系统 平台 上 兼容 。 
。 软件 是 否 能 在 同一 操作 系统 平台 的 不 同 版 本 上 兼容 。 
。 软件 本 身 能 否 向 前 或 者 向 后 兼容 。 
。 软件 能 否 与 其 他 相关 的 软件 兼容 。 
。 数据 兼容 性 测试 , 即 测试 能 否 与 其 他 软件 共享 数据 。 
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6. 用 户 界面 测试 

目前 ,大 多 数 软 件 都 具有 图 形 用 户 界面 GUICGraphic User Interface) 。 因 为 GUI 开 
发 环境 有 可 复 用 的 构件 ,开发 用 户 界面 更 加 省 时 而 且 更 加 精确 ,但 GUI 的 复杂 性 也 增加 
了 ,从 而 加 大 了 设计 和 执行 测试 用 例 的 难度 。GUI 测试 的 重点 是 图 形 用 户 界面 的 正确 
性 、 易 用 性 和 视觉 效果 。 

因为 现在 GUI 设计 和 实现 有 了 越 来 越 多 的 类 似 , 所 以 也 就 产生 了 一 系列 测试 标准 。 
下 列 问题 可 以 作为 常见 GUI 测试 的 指南 。 

(1) 窗口 

| 窗口 是 否 能 够 基于 相关 的 输入 和 菜单 命令 适当 地 打开 。 

@ 窗口 能 否 改变 大 小 、 移 动 和 滚动 。 

@@ 窗口 中 的 数据 内 容 能 和 否 用 鼠标 、 功 能 键 .方向 键 和 键盘 访问 。 

@ 当 被 覆盖 并 重新 调用 后 ,窗口 能 否 正确 地 重 现 。 

需要 时 能 否 使 用 所 有 窗口 相关 的 功能 。 

@ 所 有 窗口 相关 的 功能 是 否 可 操作 。 

G@ 是 否 有 相关 的 下 拉 式 菜单 .工具 条 、 深 动 条 、 对 话 框 , 按 钮 ,图标 和 其 他 控件 可 为 窗 
口 使 用 ,并 适当 地 显示 。 

@ 显示 多 个 窗口 时 ,窗口 的 名 称 是 否 能 够 被 适当 地 表示 。 

@ 活动 窗口 是 否 能 够 被 适当 地 加 亮 。 

@ 如 果 使 用 多 任务 ,是 否 所 有 的 窗口 被 实时 更 新 。 

@@ 多 次 或 不 正确 按照 标 键 是 否 会 导致 无 法 预料 的 副作用 。 

@@ 窗口 的 声音 和 颜色 提示 及 窗口 的 操作 顺序 是 否 符 合 需 求 。 

3 窗口 能 否 被 正确 地 关闭 。 

(2) 下 拉 式 菜单 和 鼠标 操作 

J@ 菜单 条 是 否 显 示 在 合适 的 上 下 文 环境 中 。 

@ 应 用 程序 的 菜单 条 是 否 显 示 与 系统 相关 的 特性 (如 时 钟 显示 )。 

@ 下 拉 式 操作 能 否 正确 工作 。 

@ 菜单 . 调 色 板 和 工具 条 是 否 能 够 正确 工作 。 

@ 是 否 适当 地 列 出 了 所 有 的 菜单 功能 和 下 拉 式 子 菜单 功能 。 

@ 是 否 可 以 通过 鼠标 访问 所 有 的 菜单 功能 。 

Q@ 文本 字体 、 大 小 和 格式 是 否 正确 。 

@ 是 否 能 够 用 其 他 文本 命令 激活 每 个 菜单 功能 。 

@ 菜单 功能 是 否 随 当前 的 窗口 操作 加 亮 或 变 灰 。 

外 菜单 功能 能 否 正确 执行 。 

@@ 菜单 功能 的 名 字 是 否 具 有 自 解 释 性 。 

四 菜单 项 是 否 有 帮助 ,是 否 上 下 文 环境 相关 。 

思 在 整个 交互 式 环境 中 ,是 否 可 以 识别 鼠标 操作 。 

外 如 果 要 求 多 次 点 击 鼠 标 ,是 否 能 够 在 上 下 文 环境 中 正确 识别 。 

图 光标 、 处 理 指示 器 和 识别 指针 是 否 能 够 随 操作 恰当 地 改变 。 
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(3) 数据 项 

QO 字母 数字 数据 项 是 否 能 够 正确 回 显 , 并 输入 到 系统 中 。 
@ 图 形 模式 的 数据 项 (如 滚动 条 ) 是 否 能 够 正常 工作 。 

@ 是 否 能 够 识别 非法 数据 。 

@ 数据 输入 消息 是 否 可 理解 。 


7. 文档 测试 

文档 测试 (Documentation Testing) 主要 是 指 对 提交 给 用 户 的 文档 进行 的 测试 。 这 是 
一 项 十 分 重要 的 测试 。 文 档 测试 的 对 象 主要 包括 : 包装 文字 和 图 形 ,市 场 宣 传 材 料 .广告 
及 其 他 插页 ,授权 、 注 册 登 记 表 ,最 终 用 户 许可 协议 ,安装 和 设置 向 导 , 用 户 手 册 , 联 机 帮 
助 , 样 例 . 示 例 和 模板 。 

文档 测试 的 目的 是 提高 易 用 性 和 可 靠 性 ,降低 技术 支持 费用 ,尽量 使 用 户 通过 文档 自 
行 解决 问题 。 因 此 ,文档 测试 的 检查 内 容 主要 包括 如 下 : 

(1) 文档 的 内 容 是 否 能 让 不 同 级 别 的 读者 理解 。 

(2) 文档 中 的 术语 是 否 适合 读者 。 

(3) 内 容 和 主题 是 否 合适 。 

(4) 图 表 的 准确 度 和 精确 度 如 何 。 

(5) 样 例 和 示例 是 否 与 软件 功能 一 致 。 

(6) 拼写 和 语法 是 否 准确 。 

(7) 文档 是 否 与 其 他 相关 文档 的 内 容 一 致 ,例如 与 广告 信息 是 否 一 致 。 


8. 安装 测试 和 逢 载 测 试 

(1) 安装 测试 

安装 测试 (Installation Testing) 的 目的 是 确认 如 下 方面 能 否 实现 : 

Q@ 安装 程序 能 够 正确 运行 。 

@ 软件 安装 正确 。 

@ 软件 安装 后 能 够 正常 运行 。 

安装 测试 应 着 重 关 注 如 下 方面 : 

Q@ 安装 手册 中 的 所 有 步骤 得 到 验证 。 

@ 安装 过 程 中 所 有 默认 选项 得 到 验证 。 

@ 安装 过 程 中 典型 选项 得 到 验证 。 

@ 测试 各 种 不 同 的 安装 组 合 ,并 验证 各 种 不 同 组 合 的 正确 性 ,包括 参数 组 合 、 控 件 执 
行 顺序 组 合 .产品 安装 组 件 组 合 .产品 组 件 安装 顺序 组 合 (如 B/S) 等 。 

@ 对 安装 过 程 中 异常 配置 或 状态 (非法 和 不 合理 配置 ) 情 况 进 行 测试 ,例如 断 电 、 网 
络 失 效 .数据库 失效 等 。 

@ 安装 后 是 否 能 生成 正确 的 目录 结构 和 文件 。 

@ 安装 后 动态 库 是 否 正确 。 

安装 后 软件 能 否 正常 运行 。 

@ 安装 后 是 否 会 生成 多 余 的 目录 结构 ,文件 ,注册 表 人 信息、 快捷 方式 等 。 
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@ 安装 测试 是 否 在 所 有 的 运行 环境 上 进行 了 验证 ,例如 操作 系统 数据库、 硬件 环 
境 、 网 络 环境 等 。 

@ 能 否 在 笔记 本 上 进行 安装 (很 多 产品 在 笔记 本 中 安装 时 会 出 现 问题 ,尤其 是 系统 
级 产品 ) 。 

@@ 安装 软件 后 是 否 会 对 操作 系统 或 某 些 应 用 程序 造成 不 良 影响 。 

@ 是 否 可 以 识别 大 部 分 硬件 。 

@@ 确认 打包 程序 的 特性 ,不 同 的 打包 发 布 程序 所 支持 的 系统 都 是 不 一 样 的 。 

加 空间 不 足 ( 如 安装 过 程 中 向 安装 盘 放 和 人 大 量 文 件 ) 时 安装 情况 如 何 。 

(2) 缉 载 测 试 

印 载 测试 CUninstallation Testing) 应 重点 关注 如 下 方面 : 

Q 在 不 同 的 外 载 方式 下 印 载 。 例 如 程序 自 带 外 载 程序 、 系 统 的 控件 面板 名 载 .通过 
其 他 自动 印 载 工具 (如 优化 大 师 ) 。 

@ 软件 在 运行 .暂停 .终止 等 各 种 状态 时 的 印 载 。 

@@ 非 正 常 卸 载 情况 ,如 在 印 载 软件 过 程 中 取消 印 载 进程 ,然后 观察 软件 能 和 否 继续 正 
常 使 用 。 

@ 冲击 卸载 。 即 在 印 载 的 过 程 中 中 断 电 源 ,启动 计算 机 后 ,重新 卸载 软件 。 

Q@ 在 不 同 的 运行 环境 (如 操作 系统 数据库、 硬件 环境 、 网 络 环境 等 ) 下 进行 印 载 。 

@ 能 否 在 笔记 本 上 进行 和 卸载。 

Q@ 卸载 后 是 否 对 操作 系统 或 其 他 应 用 程序 造成 不 良 影响 。 

@ 撮 载 过 程 中 是 否 删除 了 系统 应 该 保留 的 用 户 数据 。 

@ 钾 载 后 系统 能 否 恢 复 到 软件 安装 前 的 状态 ,包括 快捷 方式 .目录 结构 .动态 链接 
库 .注册 表 .系统 配置 文件 .驱动 程序 .关联 情况 等 。 
7.2.3 系统 测试 与 集成 测试 的 区 别 

从 对 集成 后 的 功能 进行 测试 这 一 点 来 看 ,集成 测试 与 其 后 进行 的 系统 测试 有 一 些 相 
似 之 处 ,但 两 者 有 着 明显 的 区 别 。 

系统 测试 是 对 全 部 模块 集成 完毕 的 软件 进行 功能 .性 能 及 其 他 特性 (如 安全 性 .兼容 
性 、 健 壮 性 等 ) 的 测试 ,检测 其 与 系统 中 其 他 元 素 ( 硬 件 . 外 设 、 网 络 . 系 统 软件 .支持 平台 
等 ) 能 否 协同 工作 ,以 满足 用 户 的 各 种 需求 。 系 统 测试 的 主要 依据 是 软件 的 需求 规格 说 明 
书 和 相关 的 行业 标准 。 

而 在 集成 的 过 程 中 ,对 功能 和 性 能 的 测试 则 是 集成 测试 ,集成 测试 的 主要 依据 是 软件 
的 概要 设计 说 明 书 。 

相对 于 系统 测试 而 言 ,集成 测试 具有 如 下 优点 : 

。 集 成 测试 的 用 例 设计 是 从 软件 架构 出 发 的 ,针对 性 较 强 , 较 易于 发 现 错误 并 找 出 

错误 的 原因 和 位 置 ; 
。 集成 测试 是 在 模块 组 装 过 程 中 进行 的 测试 ,能 有 效 地 模拟 几乎 所 有 的 实际 执行 流 
程 , 故 能 更 有 效 地 发 现 软件 中 的 错误 ; 
。 解决 在 集成 测试 阶段 发 现 的 问题 的 成 本 要 远 小 于 系统 测试 阶段 。 
正 是 由 于 集成 测试 相对 于 单元 测试 和 系统 测试 有 着 自身 的 独特 优势 ,使 得 集成 测试 
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成 为 软件 测试 中 一 个 不 可 或 缺 的 环节 。 


7.3 性 能 测试 策略 


通过 刚才 对 性 能 测试 中 的 几 种 主要 测试 类 型 (压力 测试 .负载 测试 .疲劳 测试 .强度 测 
试 、 容 量 测试 ) 的 介绍 可 以 发 现 ,不 同 的 性 能 测试 类 型 所 做 的 工作 却 有 很 大 的 关联 。 事 实 
上 ,性 能 测试 的 很 多 内 容 可 以 经 过 一 定 的 组 织 统一 进行 ,也 就 是 可 以 按照 “全 面 性 能 测试 
模型 "的 策略 来 开展 性 能 测试 ,这 样 做 的 好 处 在 于 可 以 由 浅 入 深 地 按照 层次 对 应 用 系统 进 
行 测试 ,进而 减少 不 必要 的 工作 量 , 以 实现 节约 测试 成 本 。 

全 面 性 能 测试 模型 提出 的 主要 依据 就 是 一 种 类 型 的 性 能 测试 可 以 在 某 些 条 件 下 转化 
成 另外 一 种 类 型 的 性 能 测试 ,而 这 些 类 型 的 测试 实施 是 非常 类 似 的 。 例 如 ,针对 一 个 网 站 
进行 测试 ,模拟 10 一 50 个 用 户 时 就 是 在 进行 常规 性 能 测试 ;而 用 户 增加 到 1000 乃至 上 万 
就 变 成 了 压力 /负载 测试 ;如 果 同 时 对 系统 进行 大 量 的 数据 查询 操作 ,就 包含 了 强度 测试 
或 容量 测试 ; 若 负载 测试 持续 较 长 时 间 , 则 包含 了 疲劳 测试 。 

7.3.1 全 面 性 能 测试 模型 

如 今 的 性 能 测试 ,多 数 是 针对 Web 系统 的 性 能 测试 。 在 全 面 性 能 测试 模型 中 ,针对 
Web 性 能 测试 ,将 其 划分 为 预期 指标 的 性 能 测试 、 独 立业 务 性 能 测试 .组 合 业 务 性 能 测 
试 ,疲劳 测试 .容量 测试 、 网 络 性 能 测试 、 服 务 器 性 能 测试 和 特殊 测试 8 个 类 别 。 当 然 , 这 
并 不 影响 全 面 性 能 测试 模型 在 其 他 类 型 软件 的 性 能 测试 中 的 运用 。 

下 面 首先 介绍 8 个 性 能 测试 类 别 的 主要 内 容 。 


1. 预期 指标 的 性 能 测试 

系统 在 需求 分 析 和 设计 阶段 都 会 提出 一 些 性 能 指标 。 例 如 ,系统 可 以 支持 并 发 用 户 
1000 ,系统 响应 时 间 不 得 高 于 10 秒 等 在 产品 说 明 书 等 文档 中 十 分 明确 的 内 容 说 明 。 

验证 这 些 指 标 是 性 能 测试 要 完成 的 首要 工作 之 一 ,可 将 针对 预先 确定 的 性 能 指标 的 
测试 称 为 预期 指标 的 性 能 测试 。 


2， 独立 业务 性 能 测试 

独立 业务 主要 是 指 一 些 核心 业务 模块 ,这 些 模 块 通常 具有 功能 比较 复杂 、 使 用 比较 频 
繁 、. 属 于 核心 业务 等 特点 。 这 类 特殊 的 、 功 能 比较 独立 的 业务 模块 始终 都 是 性 能 测试 的 重 
点 。 通 常 , 不 但 要 测试 这 类 模块 的 一 些 与 性 能 相关 的 算法 ,还 要 测试 这 类 模块 对 并 发 用 户 
的 响应 情况 。 

核心 业务 模块 在 需求 阶段 就 可 以 确定 ,在 系统 测试 阶段 开始 单独 测试 其 性 能 。 如 果 
是 系统 类 软件 或 者 特殊 应 用 的 软件 ,通常 从 单元 测试 阶段 就 开始 进行 测试 ,在 后 继 的 集成 
测试 .系统 测试 .验收 测试 中 进一步 进行 测试 ,以 保证 核心 业务 模块 的 性 能 稳定 。 

并 发 性 能 测试 是 核心 业务 模块 的 重点 测试 内 容 , 即 模拟 一 定数 量 的 用 户 同时 使 用 某 
一 核心 模块 的 “相同 ”的 或 者 “不 同 ” 的 功能 ,并 且 持 续 一 段 时 间 。 对 “相同 ”的 功能 进行 并 
发 测试 分 为 两 种 类 型 ,一 类 是 在 同一 时 刻 进行 完全 相同 的 操作 ,例如 打开 同一 条 数据 记录 
进行 查看 ;另外 一 类 是 在 同一 时 刻 使 用 完全 相同 的 功能 ,例如 同时 提交 数据 进行 保存 。 显 
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然 ,后 者 是 包含 前 者 的 ,而 前 者 是 后 者 的 特例 。 


3. 组 合 业务 性 能 测试 

通常 不 会 所 有 的 用 户 只 使 用 一 个 或 者 几 个 核心 业务 模块 ,因而 Web 性 能 测试 既 要 模 
拟 多 用 户 的 “相同 ”操作 ( 即 很 多 用 户 使 用 同一 功能 ) ,又 要 模拟 多 用 户 的 “不 同 ” 操 作 ( 即 很 
多 用 户 同 时 对 一 个 或 者 多 个 模块 的 不 同 功 能 进行 操作 ) ,对 多 个 业务 进行 组 合 性 能 测试 。 
组 合 业务 测试 是 最 接近 用 户 实际 使 用 情况 的 测试 ,因而 是 性 能 测试 的 核心 内 容 。 通 常 , 按 
照 用 户 的 实际 使 用 情况 来 模拟 使 用 各 个 模板 的 人 数 比例 。 

由 于 组 合 业务 测试 是 最 能 反映 用 户 使 用 系统 情况 的 测试 ,因而 组 合 测试 往往 与 服务 
器 (操作 系统 、Web 服务 器 数据库 服务 器 ) 性 能 测试 结合 起 来 ,在 通过 工具 模拟 用 户 行为 
的 同时 ,还 通过 测试 工具 的 监控 功能 采集 服务 器 的 计数 器 信息 ,进而 全 面 分 析 系 统 的 性 能 
瓶颈 ,为 优化 系统 性 能 提供 有 利 的 依据 。 

并 发 性 能 测试 是 组 合 业务 测试 的 核心 内 容 。 “组合 " 并 发 的 突出 特点 是 分 成 不 同 的 用 
户 组 进行 并 发 ,每 组 的 用 户 比 例 要 根据 实际 情况 进行 匹配 。 组 合 业务 测试 可 以 理解 为 包 
含 “核心 业务 模块 并 发 "和 “ 非 核心 业务 模块 并 发 "同时 进行 的 并 发 性 能 测试 。 

4. 疲劳 测试 

前 文 已 经 介绍 过 ,疲劳 测试 是 在 系统 稳定 运行 下 模拟 较 大 的 用 户 数量 ,并 长 时 间 运 行 
系统 ,通过 综合 分 析 执 行 指标 和 资源 监控 指标 确定 系统 处 理 最 大 业务 量 时 的 性 能 。 疲 劳 
测试 也 属于 并 发 性 能 测试 ,因而 也 可 以 分 为 独立 业务 的 疲劳 测试 和 组 合 业务 的 疲劳 测试 。 

5. 容量 测试 

容量 测试 的 目的 在 于 使 系统 承受 超额 的 数据 容量 确定 系统 的 容量 瓶颈 。 容 量 测试 可 
以 独立 进行 ,也 可 以 与 前 面 介绍 的 独立 ,组 合 业务 测试 结合 起 来 进行 ,主要 由 性 能 测试 策 
略 决定 。 

6. 网 络 性 能 测试 

网 络 性 能 测试 的 重点 是 利用 自动 化 测试 工具 进行 网 络 应 用 性 能 监控 ,网 络 应 用 性 能 
分 析 和 网 络 预测 。 

(1) 网 络 应 用 性 能 监控 

在 系统 试 运行 之 后 ,需要 及 时 准确 地 了 解 网 络 上 正在 发 生 的 事情 ;有 哪些 应 用 正在 
运行 ,如 何 运 行 ;有 多 少 PC 正在 访问 LAN 或 WAN; 哪 些 应 用 程序 会 导致 系统 瓶颈 或 
资源 竞争 ,这 时 网 络 应 用 性 能 监控 及 网 络 资源 管理 对 系统 的 正常 稳定 运行 是 非常 关键 
的 。 利 用 网 络 应 用 性 能 监控 工具 ,可 以 达到 事半功倍 的 效果 。 这 方面 的 工具 有 
Network Vantage 等 。 通 俗 地 讲 , 它 主要 用 来 分 析 关 键 应 用 程序 的 性 能 ,定位 问题 的 根 
源 是 在 客户 端 ,服务 器 、 应 用 程序 还 是 网 络 。 在 大 多 数 情况 下 ,用 户 较 关 心 的 问题 还 有 
哪些 应 用 程序 占用 大 量 带 宽 , 哪 些 用 户 产 生 了 最 大 的 网 络 流量 ,这 个 工具 同样 能 满足 
要 求 。 

(2) 网 络 应 用 性 能 分 析 

网 络 应 用 性 能 分 析 的 目的 是 准确 地 展示 网 络 带宽 、 延 迟 、 负 载 和 TCP 端口 的 变化 
是 如 何 影 响 用 户 的 响应 时 间 的 。 利 用 网 络 应 用 性 能 分 析 工 具 , 例 如 Application Expert， 
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能 够 发 现 应 用 的 瓶颈 ,可 知 在 网 络 上 运行 时 在 每 个 阶段 发 生 的 应 用 行为 ,在 应 用 线程 
级 分 析 应 用 的 问题 ;可 以 解决 多 种 问题 ,例如 客户 端 是 否 对 数据 库 服 务 器 运行 了 不 必 
要 的 请 求 , 当 服务 器 从 客户 端 接受 了 一 个 查询 ,应 用 服务 器 是 否 花 费 了 不 可 接受 的 时 
间 联 系数 据 库 服务 器 ;在 投产 前 预测 应 用 的 响应 时 间 ; 利 用 Application Expert 调整 应 
用 在 广域网 上 的 性 能 ;Application Expert 能 够 使 用 户 快速 、 容 易 地 仿真 应 用 性 能 ,根据 
最 终 用 户 在 不 同 网 络 配 置 环境 下 的 响应 时 间 , 用 户 可 以 根据 自己 的 条 件 决定 应 用 投产 
的 网 络 环境 。 

(3) 网 络 预测 

考虑 到 系统 未 来 发 展 的 扩展 性 ,预测 网 络 流量 的 变化 、 网 络 结构 的 变化 对 用 户 系统 的 
影响 非常 重要 。 从 网 络 管理 软件 获取 网 络 拓扑 结构 ,从 现 有 的 流量 监控 软件 获取 流量 信 
息 ( 若 没有 这 类 软件 可 人 工 生成 流量 数据 ) ,可 以 得 到 现 有 网 络 的 基本 结构 。 在 基本 结构 
的 基础 上 ,可 根据 网 络 结构 及 网 络 流量 的 变化 生成 报告 和 图 表 , 说 明 这 些 变化 是 如 何 影 响 
网 络 性 能 的 ,对 网 络 性 能 进行 预测 。 

利用 网 络 预测 分 析 容 量规 划 工 具 Predictor 可 以 进行 网 络 性 能 预测 。Predictor 可 根 
据 预测 结果 帮助 用 户 及 时 升级 网 络 ,避免 因 关 键 设备 超过 利用 阔 值 导致 系统 性 能 下 降 ;还 
可 根据 预测 的 结果 避免 不 必要 的 网 络 升级 。 

7. 服务 器 性 能 测试 

对 服务 器 (操作 系统 、Web 服务 器 .数据库 服务 器 ) 的 性 能 测试 可 以 采用 工具 监控 ,也 
可 以 使 用 系统 本 身 的 监控 命令 。 例 如 ,Tuxedo 中 可 以 使 用 Top 命令 监控 资源 使 用 情况 。 

对 于 UNIX 服务 器 ,其 主要 的 资源 监控 指标 如 表 7-1 所 示 。 

表 7-1 UNIX 服务 器 的 主要 资源 监控 指标 


监控 指标 描述 
平均 负载 系统 正常 状态 下 ,最 后 60 秒 同步 进程 的 平均 个 数 
冲突 率 在 以 太 网 上 监测 到 的 每 秒 冲 突 数 
进程 /线程 交换 率 进程 与 线程 之 间 每 秒 交换 次 数 
CPU 利用 率 CPU 占用 率 (%%) 
磁盘 交换 率 磁盘 交换 速率 
接收 包 错误 率 接收 以 太 网 数据 包 时 每 秒 错误 数 
包 输入 率 每 秒 输入 的 以 太 网 数据 包 数 目 
中 断 速率 CPU 每 秒 处 理 的 中 断 数 
输出 包 错 误 率 发 送 以 太 网 数据 包 时 每 秒 错误 数 
包 输入 率 每 秒 输 出 的 以 太 网 数据 包 数 目 
读 入 内 存 页 速率 物理 内 存 中 每 秒 读 人 内 存 页 的 数目 
中 写 到 页 页 , 习 
写 出 内 存 页 速率 0 写 到 页 文件 中 的 内 存 页 数目 ,或 者 从 物理 内 存 中 删 掉 
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监控 指标 描 述 
内 存 页 交换 速率 每 秒 写 信 内存 页 和 从 物理 内 存 中 读 出 页 的 个 数 
进程 人 交换 率 交换 区 输入 的 进程 数目 
进程 出 交换 率 交换 区 输出 的 进程 数目 
系统 CPU 利用 率 系统 的 CPU 占用 率 (%) 
用 户 CPU 利用 率 用 户 模式 下 的 CPU 占用 率 (%) 
磁盘 阻塞 磁盘 每 秒 阻塞 的 字 节 数 
8. 特殊 测试 


主要 是 指 配置 测试 ,内存 泄漏 测试 等 特殊 的 Web 性 能 测试 。 这 类 性 能 测试 或 者 与 前 
面 讲 述 的 测试 结合 起 来 使 用 ,或 者 在 一 些 特 殊 情 况 下 独立 使 用 (这 时 往往 需要 特殊 的 工具 
和 较 大 的 投入 ) 。 


7.3.2 性 能 测试 策略 


1. 性 能 测试 策略 

性 能 测试 策略 一 般 从 需求 分 析 及 设计 阶段 开始 制定 ,主要 关注 性 能 测试 的 内 容 .开始 
实施 的 时 机 、 测 试 环境 和 工具 的 准备 等 。 

性 能 测试 策略 制定 的 主要 依据 是 应 用 系统 的 自身 特点 和 用 户 对 性 能 的 关注 程度 ,其 
中 应 用 系统 的 自身 特点 又 起 着 决定 性 作用 。 

软件 可 分 为 系统 软件 和 应 用 软件 。 系 统 软件 对 性 能 一 般 要 求 比 较 高 ,因此 性 能 测试 
应 该 尽早 介入 。 一 般 可 在 需求 分 析 及 设计 阶段 就 针对 系统 架构 数据库 设计 等 方面 进行 
讨论 ,规划 ,从 根源 提高 应 用 的 性 能 ;并 尽早 制定 性 能 测试 策略 ,在 单元 测试 阶段 就 应 根据 
具体 模块 的 性 能 需求 开始 实施 相应 的 性 能 测试 。 

应 用 软件 分 为 特殊 类 应 用 软件 和 一 般 类 应 用 软件 。 特 殊 类 应 用 主要 指 应 用 于 金融 、 
电信 电力、 医疗 .安全 等 领域 的 软件 ,这 类 软件 使 用 比较 频繁 , 且 一 旦 发 生性 能 问题 ,造成 
的 损失 较 大 ,因而 对 性 能 测试 要 求 一 般 也 较 高 。 对 特殊 类 应 用 软件 可 以 采取 与 系统 软件 
类 似 的 性 能 测试 策略 。 

一 般 类 应 用 主要 指 一 些 普通 应 用 ,例如 办 公 自 动 化 软件 .MIS 系统 等 。 一 般 应 用 类 
软件 的 业务 重要 级 别 较 低 ,因此 对 性 能 测试 的 要 求 一 般 低 于 系统 软件 和 特殊 类 应 用 软件 ， 
多 根据 实际 情况 决定 性 能 测试 策略 。 这 类 软件 受用 户主 观 因素 即 用 户 对 性 能 测试 的 重视 
程度 影响 较 大 。 如 果 用 户 对 应 用 系统 性 能 高 度 重视 或 比较 重视 ,可 采取 与 系统 软件 类 似 
的 性 能 测试 策略 ;如 果 用 户 对 应 用 性 能 不 十 分 重视 , 则 可 在 系统 测试 阶段 的 功能 测试 完成 
后 再 进行 性 能 测试 ,或 是 在 系统 提交 前 进行 性 能 测试 。 

一 般 类 应 用 软件 对 性 能 测试 的 要 求 通常 低 于 系统 软件 和 特殊 类 应 用 软件 的 另 一 原因 
在 于 ,一 般 类 应 用 软件 通常 耗费 资源 较 少 ,在 一 定 程度 上 提高 硬件 配置 不 需要 太 大 的 成 
本 ,因此 可 以 通过 提高 硬件 配置 ,进而 改善 运行 环境 改善 应 用 软件 的 性 能 。 从 硬件 方面 改 
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善 系统 性 能 往往 更 容易 做 到 ,而且 很 可 能 降低 总 的 开发 成 本 。 

但 应 注意 到 ,不 管 对 什么 类 型 的 软件 ,提高 硬件 配置 只 是 改善 系统 性 能 的 一 个 手段 ， 
如 果 软 件 自身 存在 性 能 问题 ,再 多 的 资源 可 能 也 不 够 用 。 例 如 内 存 泄漏 问题 , 随 着 时 间 的 
增加 ,内 存 终究 会 被 耗 尽 , 最 后 导致 系统 崩 演 。 而 且 , 若 过 分 强调 用 户 对 硬件 的 投入 ,会 给 
用 户 带 来 很 大 的 负担 ,从 而 降低 产品 的 用 户 满意 度 。 因 此 ,解决 性 能 问题 的 最 好 方法 仍 是 
软 硬 件 优 化 相 结合 。 

还 有 一 个 值得 关注 的 问题 ,就 是 性 能 测试 和 功能 测试 的 关系 。 许 多 人 认为 性 能 测试 
是 独立 于 功能 测试 的 。 实 际 上 ,两 者 有 着 紧密 的 关系 ,这 是 因为 软件 功能 和 性 能 是 联系 紧 
密 的 。 若 在 需求 分 析 和 设计 时 对 应 用 系统 的 功能 未 全 面 考虑 或 功能 划分 不 良 , 就 有 可 能 
影响 系统 性 能 。 也 就 是 说 ,软件 的 功能 缺陷 可 能 会 带 来 性 能 问题 。 软 件 的 功能 与 性 能 之 
间 的 关系 给 我 们 如 下 启示 : 

(1) 应 在 需求 分 析 和 设计 阶段 确定 软件 功能 及 对 功能 进行 细 化 时 就 考虑 其 对 性 能 的 
影响 ,尽量 从 源头 提升 软件 性 能 。 

(2) 功能 测试 可 以 发 现 性 能 问题 。 

(3) 性 能 测试 也 能 发 现 功能 问题 。 

(4) 性 能 测试 和 功能 测试 是 紧密 相连 的 ,功能 测试 通常 要 先 于 性 能 测试 执行 或 者 同 
步 进 行 。 若 功能 测试 导致 对 软件 的 修改 ,应 有 针对 性 地 再 次 进行 性 能 测试 。 

2. 性 能 测试 策略 实例 

下 面 给 出 一 些 针 对 性 能 测试 策略 制定 的 实例 。 

案例 1 一 个 银行 项 目的 性 能 测试 策略 。 

测试 策略 如 表 7-2 所 示 。 

表 7-2 某 银 行 项 目的 性 能 测试 策略 实例 


银行 卡 审批 业务 系统 ,使 用 非常 繁忙 ,业务 量 每 年 约 200 万 ,属于 银行 领域 


人 的 特殊 类 应 用 软件 


系统 属于 第 二 次 重新 开发 ,前 一 开发 商 在 系统 开发 完成 后 未 通过 性 能 测试 ， 
项 目 背 景 100 个 左右 用 户 并 发 访问 系统 时 数据 库 服 务 器 崩溃 。 因 此 新 的 系统 从 项 目 
启动 开始 ,就 着 手 制定 性 能 测试 策略 


用 户 要 求 用 户 高 度 重视 性 能 ,系统 性 能 达标 成 为 用 户 接收 产品 的 首要 条 件 


@ 从 设计 阶段 开始 进行 性 能 测试 的 准备 工作 ,主要 是 在 系统 设计 时 考虑 优 
化 性 能 的 因素 。 由 于 前 一 开发 商 失 利 的 主要 原因 是 数据 库 设计 不 合理 
从 而 导致 性 能 问题 , 故 重点 对 数据 库 设 计 进 行 研究 。 在 设计 阶段 完成 性 
能 测试 策略 的 制定 

@ 单元 测试 阶段 通过 测试 工具 对 核心 业务 模块 的 并 发 性 能 进行 测试 

@ 集成 测试 阶段 进行 组 合 业务 性 能 测试 

@ 整个 系统 测试 阶段 都 在 进行 性 能 测试 .性 能 测试 和 功能 测试 应 同步 进 
行 ,对 功能 测试 导致 的 修改 .应 再 进行 相关 的 性 能 测试 

@ 验收 测试 阶段 时 ,在 用 户 现场 的 投产 环境 进行 性 能 测试 ,根据 测试 结果 
对 系统 运行 环境 进行 调 优 ,以 达到 较 好 的 运行 效果 


性 能 测试 策略 


A 


了 
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案例 2 一 个 OA 系统 的 性 能 测试 策略 。 
测试 策略 如 表 7-3 所 示 。 
表 7-3 某 OA 系统 的 性 能 测试 策略 实例 
企业 办 公 自 动 化 系统 ,用 户 数目 在 300 人 以 内 ,主要 是 完成 信息 的 发 布 . 公 文 流 


产品 类 型 转 、 邮 件 收发 等 功能 。 该 软件 属于 一 般 类 应 用 软件 ,对 性 能 的 要 求 不 高 ,性 能 测 
试 不 属于 测试 中 的 重点 

项 目 背景 已 有 稳定 的 产品 ,主要 是 根据 客户 的 个 性 化 需求 进行 二 次 开发 

用 户 要 求 在 300 个 用 户 并 发 使 用 时 ,各 独立 业务 及 组 合 业务 的 响应 时 间 均 不 超过 2 秒 


加 系统 测试 阶段 开始 进行 性 能 测试 策略 的 制定 

四 性 能 测试 在 系统 测试 阶段 的 功能 测试 之 后 进行 ,主要 是 评估 系统 性 能 并 对 其 

性 能 测试 策略 进行 优化 

@ 验收 测试 阶段 在 用 户 现场 的 投产 环境 进行 性 能 测试 ,根据 测试 结果 对 系统 运 
行 环境 进行 调 优 , 以 达到 较 好 的 运行 效果 


案例 3 一 个 门户 系统 的 性 能 测试 策略 。 
测试 策略 如 表 7-4 所 示 。 
表 7-4 某 门 户 系 统 的 性 能 测试 策略 实例 


ei 主要 用 于 单位 信息 的 发 布 ,用 户 在 50 人 以 内 。 该 系统 属于 一 般 类 应 用 软 
ee 件 , 对 性 能 要 求 低 
项 目 背景 软件 运行 的 硬件 环境 较 好 
用 户 要 求 没有 具体 的 要 求 
@ 性 能 测试 策略 在 系统 测试 的 后 期 开始 制定 
性 能 测试 策略 @ 验收 测试 阶段 在 用 户 现场 的 投产 环境 进行 性 能 测试 ,根据 测试 结果 对 系 
统 运行 环境 进行 调 优 ,以 达到 较 好 的 运行 效果 


可 以 看 出 ,以 上 3 个 案例 的 性 能 测试 策略 有 着 较 大 的 差别 。 通过 这 3 个 案例 ,可 对 性 
能 测试 策略 的 制定 有 更 进一步 的 了 解 。 实 际 上 ,除了 应 用 系统 的 自身 特点 和 用 户 对 性 能 
的 关注 程度 外 ,影响 性 能 测试 策略 的 还 包括 项 目的 背景 软件 运行 环境 等 。 因 此 ,制定 性 
能 测试 策略 时 应 充分 考虑 各 方面 的 实际 因素 ,灵活 地 制定 性 能 测试 策略 。 
7.3.3 全面 性 能 测试 模型 的 使 用 

全 面 性 能 测试 模型 是 针对 Web 性 能 测试 提出 的 一 种 方法 ,主要 目的 是 使 Web 性 能 
测试 更 容易 组 织 和 开展 。 要 想 在 性 能 测试 中 用 好 、 用 活 全 面 性 能 测试 模型 ,首先 要 针对 具 
体 的 应 用 系统 制定 出 合理 的 性 能 测试 策略 ,同时 还 应 注意 遵循 如 下 基本 原则 。 


1. 最 低 测 试 成 本 原则 

Web 性 能 测试 本 身 是 一 种 高 投入 的 测试 , 若 开发 商 (或 测试 外 包 提 供 商 ) 用 于 测试 的 
资金 有 限 ,不 能 对 软件 项 目的 全 部 性 能 指标 进行 严格 的 测试 ,因而 在 制定 性 能 测试 策略 时 
应 遵循 最 低 测 试 成 本 原则 。 

最 低 性 能 测试 成 本 的 衡量 标准 主要 指 投入 的 测试 成 本 能 否 使 系统 满足 预先 确定 的 性 
能 测试 目标 。 


2. 用 例 裁剪 原则 
全 面 性 能 测试 模型 主要 是 针对 电信 ,金融 等 特殊 类 应 用 软件 而 提出 的 。 这 类 软件 的 
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业务 重要 性 级 别 高 ,对 系统 性 能 要 求 高 ,因而 包含 的 测试 内 容 比较 全 面 ,测试 用 例 数目 较 
大 。 对 于 一 般 的 应 用 系统 ,可 根据 系统 自身 的 特点 和 用 户 对 性 能 的 要 求 ,对 根据 全 面 性 能 
测试 模型 设计 的 测试 用 例 进行 适当 的 裁剪 ,以 缩短 性 能 测试 周期 ,节约 测试 成 本 。 

3. 模型 具体 化 原则 

全 面 性 能 测试 模型 的 使 用 绝 不 能 生 搬 硬 套 ,要 使 全 面 性 能 测试 模型 在 Web 性 能 测试 
或 其 他 类 型 应 用 系统 的 性 能 测试 中 真正 发 挥 作用 ,应 根据 实际 软件 项 目的 特点 .软件 运行 
环境 ,用户 对 系统 性 能 的 要 求 等 因素 制定 出 合理 的 性 能 测试 策略 ,编写 适当 的 性 能 测试 用 
例 ,并 在 测试 实施 过 程 中 灵活 地 执行 测试 方案 。 


7.4 基于 Web 的 系统 测试 


随 着 网 络 技术 和 软件 技术 的 发 展 . Web 应 用 日 益 广泛 , Web 系统 的 重要 性 也 日 益 突 
出 。 在 这 一 节 中 将 全 面 介绍 基于 Web 的 系统 测试 。 

基于 Web 的 系统 测试 不 仅 要 检验 系统 是 否 能 按 既 定 的 设计 要 求 正 确 地 完成 相应 功 
能 ,还 要 从 用 户 的 角度 进行 诸如 可 用 性 、 安 全 性 等 方面 的 测试 。 此 外 ,Web 系统 一 般 较 复 
杂 , 涉 及 的 环节 较 多 ,如 网 络 、 硬 件 等 ,各 组 件 能 否 很 好 地 协同 工作 也 是 需要 测试 的 方面 。 
然而 ,Internet 和 Web 媒体 的 不 可 预见 性 使 测试 基于 Web 的 系统 变 得 困难 。 因 此 ,有 必 
要 专门 研究 针对 Web 的 系统 测试 内 容 和 方法 。 当 然 ,如 果 能 够 对 基于 Web 的 系统 测试 
得 心 应 手 , 其 他 类 型 软件 的 系统 测试 应 该 是 不 成 问题 的 。 

基于 Web 的 系统 测试 主要 可 分 为 功能 测试 ,性 能 测试 ,用 户 界面 测试 ,兼容 性 测试 和 
配置 测试 .安全 测试 和 接口 测试 ,如 图 7-1 所 示 。 其 中 , Web 系统 的 性 能 测试 已 在 前 面 介 
绍 过 ,下 面 对 其 他 部 分 加 以 介绍 。 


功能 测试 性 能 测试 


兼容 性 测试 


用 户 界面 测试 和 配置 测试 


基于 Web 的 系统 


安全 测试 接口 测试 
图 7-1 基于 Web 的 系统 测试 


7.4.1 功能 测试 


1. 链接 测试 

链接 是 Web 应 用 系统 的 一 个 主要 特征 , 它 是 在 页 面 之 间 切 换 和 指导 用 户 访问 未 知 地 
址 的 页 面 的 主要 手段 。 链 接 测试 可 包括 以 下 3 个 步骤 : 

Q@ 测试 所 有 链接 是 否 按 指示 的 那样 确实 链接 到 应 该 链接 的 页 面 。 

@ 测试 所 链接 的 页 面 是 否 存在 。 

@ 保证 Web 应 用 系统 上 没有 孤立 的 页 面 。 所 谓 孤 立 页 面 是 指 没有 链接 指 
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面 , 只 有 知道 正确 的 URL 地 址 才能 访问 。 

应 在 整个 Web 应 用 系统 的 所 有 页 面 开 发 完成 之 后 进行 链接 测试 。 

链接 测试 可 以 自动 进行 ,现在 已 经 有 许多 自动 检测 网 站 链接 的 软件 ,如 Xenu Link 
Sleuth, HTML Link Validator。 

Xenu Link Sleuth 是 一 个 小 巧 但 功能 强大 的 检查 网 站 死 链 接 的 免费 . 免 安 装 软件 ,用 
户 可 以 打开 一 个 本 地 网 页 文件 来 检查 它 的 链接 ,也 可 以 输入 任何 网 址 来 检查 。 它 可 以 分 
别 列 出 网 站 的 活 链接 及 死 链 接 , 连 转向 链接 它 都 分 析 得 一 清二 楚 。Xenu Link Sleuth 还 
支持 多 线程 ,可 以 把 检查 结果 存储 成 文本 文件 或 网 页 文件 。 

网 页 链接 检查 程序 HTML Link Validator( 共 享 软 件 ) ,可 以 帮助 用 户 进 行 ftp: // 和 
http: // 的 链接 检查 ,判断 是 否 有 无 法 链接 的 内 容 。 


2. 表单 测试 

当 用 户 通过 表单 提交 信息 的 时 候 , 都 希望 表单 能 够 正常 工作 。 如 果 使 用 表单 进行 在 
线 注册 ,应 确保 提交 按钮 能 正常 工作 , 当 注 册 完 成 后 应 返回 注册 成 功 的 消息 。 如 果 使 用 表 
单 收集 配送 信息 ,应 确保 程序 能 够 正确 地 处 理 这 些 数据 ,最 后 能 让 客户 收 到 包 里 。 要 测试 
这 些 程序 ,需要 验证 服务 器 能 正确 地 保存 这 些 数据 ,而 且 后 台 运 行 的 程序 能 正确 地 解释 和 
使 用 这 些 信息 。 

当 用 户 使 用 表单 进行 用 户 注册 登录、 信息 提交 等 操作 时 ,必须 测试 提交 操作 的 完整 
性 ,以 校 验 提交 给 服务 器 的 信息 的 正确 性 。 例 如 ,用 户 填 写 的 出 生日 期 与 职业 是 否 恰当 ， 
填写 的 所 属 省 份 与 所 在 城市 是 否 匹 配 等 ;如 果 使 用 默认 值 ,还 需 检验 默认 值 的 正确 性 。 如 
果 表 单 只 能 接受 指定 的 某 些 值 , 则 也 要 进行 测试 。 例 如 , 若 只 能 接受 某 些 字符 ,测试 时 可 
以 跳 过 这 些 字符 ,看 系统 是 否 会 报错 。 


3, 对 数据 校 验 的 测试 

如 果 Web 系统 根据 业务 规则 需要 对 用 户 的 输入 进行 校 验 , 则 需要 保证 这 些 校 验 功能 
能 够 正常 使 用 。 

例如 ,省 份 的 字段 可 以 用 一 个 有 效 列表 进行 校 验 。 在 这 种 情况 下 ,需要 验证 列表 完整 
而 且 程 序 正确 调用 了 该 列表 ,可 在 列表 中 添加 一 个 测试 值 ,确定 系统 是 否 能 够 接受 这 个 测 
试 值 。 

在 测试 表单 时 ,对 数据 校 验 的 测试 和 表单 测试 可 能 会 有 一 些 重复 。 

表单 测试 和 对 数据 校 验 的 测试 可 采用 的 策略 是 ,第 一 个 完整 的 系统 版 本 采用 手动 检 
查 ,同时 形成 WinRunner 或 QTP 等 功能 测试 工具 的 脚本 ,进行 回归 测试 主要 依靠 测试 工 
有 具 自动 回放 脚本 完成 测试 。 


4. Cookies 测试 

Cookies 通常 用 来 存储 用 户 信息 和 用 户 在 某 应 用 系统 的 操作 。 当 一 个 用 户 使 用 
Cookies 访问 了 某 一 个 应 用 系统 时 , Web 服务 器 将 发 送 关于 用 户 的 信息 ,把 该 信息 以 
Cookies 的 形式 存储 在 客户 端 计 算 机 上 ,这 可 用 来 创建 动态 和 自 定义 页 面 或 者 存储 登录 
等 信息 。 

如 果 Web 应 用 系统 使 用 了 Cookies ,就 必须 检查 Cookies 是 否 能 正常 工作 。 测 试 的 
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内 容 可 包括 Cookies 是 否 起 作用 、 是 否 按 预定 的 时 间 进 行 保存 、 刷 新 对 Cookies 有 什么 影 
响 等 。 如 果 在 Cookies 中 保存 了 注册 信息 ,应 确认 该 Cookies 能 够 正常 工作 而 且 已 对 这 
些 信息 进行 了 加 密 。 如 果 使 用 Cookies 来 统计 次 数 , 需 要 验证 次 数 累计 是 否 正确 。 

如 何 进 行 Cookies 测试 呢 ? 可 采用 上 文 提 到 的 方法 进行 黑 盒 测试 ,也 可 采用 查看 
Cookies 的 工具 软件 进行 ,如 IECookiesView V1.70 和 Cookies Manager V1. 1。 

IECookiesView V1. 70 可 以 帮助 用 户 搜寻 并 显示 出 自己 计算 机 中 所 有 的 Cookies 档 
案 的 数据 ,包括 是 哪 一 个 网 站 写 人 Cookies 的 ,内 容 有 什么 , 写 入 的 时 间 日 期 及 此 Cookies 
的 有 效 期 限 等 资料 ,以 防止 用 户 隐 私 的 泄露 。 此 软件 只 对 I 浏览 器 的 Cookies 有 效 。 

Cookies Manager V1.1 则 可 帮助 我 们 查看 和 管理 自己 硬盘 中 的 Cookies 。 

当然 ,用 查看 Cookies 的 工具 只 能 辅助 对 Cookies 进行 测试 。 


5. 数据 库 测 试 

在 Web 应 用 技术 中 ,数据 库 起 着 重要 的 作用 。 数 据 库 为 Web 应 用 系统 的 管理 、 运 
行 .查询 和 实现 用 户 对 数据 存储 的 请 求 等 提供 了 空间 。 在 Web 应 用 中 ,最 常用 的 数据 库 
类 型 是 关系 型 数据 库 , 可 以 使 用 SQL 对 信息 进行 处 理 。 

在 使 用 了 数据 库 的 Web 应 用 系统 中 ,一 般 情况 下 可 能 发 生 两 种 错误 , 即 数 据 一 致 性 
错误 和 输出 错误 。 数 据 一 致 性 错误 主要 是 由 于 用 户 提交 的 表单 信息 不 正确 而 造成 的 ,而 
输出 错误 主要 是 由 于 网 络 速度 或 程序 设计 问题 等 引起 的 。 针 对 这 两 种 情况 ,可 分 别 进行 
测试 。 

6. 对 应 用 程序 特定 功能 需求 的 测试 

最 重要 的 是 ,测试 人 员 需 要 对 应 用 程序 特定 的 功能 需求 进行 验证 ,尝试 用 户 可 能 进行 
的 所 有 操作 ,如 下 订单 .更 改 订单 .取消 订单 、 核 对 订单 状态 、 在 货物 发 送 之 前 更 改 送 货 信 
息 .在线 支付 等 。 因 为 这 是 用 户 使 用 网 站 的 原因 ,一 定 要 确认 网 站 能 够 完成 广告 宣传 中 的 
所 有 功能 。 

7. 设计 语言 测试 

Web 设计 语言 版 本 的 差异 可 以 引起 客户 端 或 服务 器 端 严 重 的 问题 ,如 使 用 哪 种 版 本 
的 HTML 等 。 当 在 分 布 式 环境 中 开发 时 ,开发 人 员 都 不 在 一 起 ,这 个 问题 就 显得 尤为 重 
要 。 除 了 HTML 的 版 本 问题 外 ,不 同 的 脚本 语言 ,例如 Java, JavaScript，ActiveX， 
VBScript 或 Perl 等 也 需要 进行 验证 。 

7.4.2 ”用户 界面 测试 


1. 导航 测试 

导航 描述 了 用 户 在 一 个 页 面 内 操作 的 方式 (在 不 同 的 用 户 接口 控制 之 间 , 例 如 按钮 、 
对 话 框 ,列表 和 窗口 等 ,或 在 不 同 的 连接 页 面 之 间 )。 

通过 考虑 下 列 问 题 ,可 以 决定 一 个 Web 应 用 系统 是 否 易于 导航 : 

。 导航 是 否 直观 ; 

。 Web 系统 的 主要 部 分 是 否 可 通过 主页 存 取 ; 

。 Web 系统 是 否 需要 站 点 地 图 搜索 引擎 或 其 他 导航 帮助 。 
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2. 图 形 测试 


在 Web 应 用 系统 中 ,适当 的 图 片 和 动画 既 能 起 到 广告 宣传 的 作用 ,又 能 美化 页 面 。 
一 个 Web 应 用 系统 的 图 形 可 以 包括 图 片 动画 边框 .颜色 .字体 .背景 .按钮 等 。 图 形 测 
试 的 内 容 如 下 

。 确保 图 形 有 明确 的 用 途 , 图 片 或 动画 切 鼠 乱 堆 在 一 起 ,以 免 浪费 传输 时 间 。Web 

应 用 系统 的 图 片 应 能 清楚 地 说 明 某 件 事情 ,一般 都 链接 到 某 个 具体 的 页 面 。 

。 所 有 页 面 字 体 的 风格 是 否 一 致 。 
背景 颜色 与 字体 颜色 和 前 景 颜色 是 否 匹 配 。 

。 图 片 的 大 小 和 质量 也 是 一 个 很 重要 的 因素 ,一 般 采 用 JPG 或 GIF 压缩 ,最 好 能 使 
图 片 的 大 小 减 小 到 30KB 以 下 。 
。 文字 回 绕 是 否 正确 。 不 要 因为 使 用 图 片 而 使 窗口 和 段落 排列 古怪 或 者 出 现 孤 行 。 


3. 内 容 测试 

内 容 测 试用 来 检验 Web 应 用 系统 提供 信息 的 正确 性 、 准 确 性 和 相关 性 。 

信息 的 正确 性 是 指 信息 的 来 源 是 可 靠 的 ,例如 在 商品 价格 列表 中 ,错误 的 价格 可 能 引 
起 财政 问题 甚至 导致 法 律 纠纷 。 信 息 的 准确 性 是 指 是 否 存在 语法 或 拼写 错误 ,这 种 测试 
通常 使 用 一 些 文字 处 理 软件 来 进行 ,例如 使 用 Microsoft Word 的 “拼音 与 语法 检查 ” 功 
能 。 信 息 的 相关 性 是 指 是 否 在 当前 页 面 可 以 找到 与 当前 浏览 信息 相关 的 信息 列表 或 人 
口 ,也 就 是 一 般 Web 站 点 中 的 所 谓 “ 相 关 文 章 列表 ”。 


4. 表格 测试 

需要 验证 表格 是 否 设置 正确 。 例 如 ,表格 中 每 一 栏 的 宽度 是 否 足够 宽 ,单元 格 里 的 文 
字 是 否 都 有 折 行 ,是 否 有 因为 某 一 格 的 内 容 太 多 而 将 整 行 的 内 容 拉 长 ,这些 都 是 需要 考虑 
的 问题 。 


5. 整体 界面 测试 

整体 界面 是 指 整 个 Web 应 用 系统 的 页 面 结构 。 例 如 , 当 用 户 浏 览 Web 应 用 系统 时 
是 否 感到 舒适 ,是 否 凭 直觉 就 知道 要 查找 的 信息 在 何 处 ,整个 Web 应 用 系统 的 设计 风格 
是 否 一 致 等。 

对 整体 界面 的 测试 过 程 ,其 实 是 一 个 对 最 终 用 户 进 行 调查 的 过 程 。 一 般 Web 应 用 系 
统 采用 在 主页 上 做 一 个 调查 问卷 的 形式 ,得 到 最 终 用 户 的 反馈 信息 。 
7.4.3 ”兼容 性 测试 和 配置 测试 


1. 平台 测试 

操作 系统 的 类 型 很 多 ,最 常见 的 有 Windows,UNIX,Macintosh,Linux 等 。Web 应 
用 系统 的 最 终 用 户 究 竞 使 用 哪 一 种 操作 系统 ,取决 于 用 户 系统 的 配置 。 这 样 ,就 可 能 产生 
兼容 性 问题 ,同一 个 应 用 可 能 在 某 些 操作 系统 下 能 正常 运行 ,但 在 另外 的 操作 系统 下 可 能 
会 运行 失败 。 

因此 ,在 Web 系统 发 布 之 前 ,需要 在 各 种 操作 系统 下 对 Web 系统 进行 兼容 性 测试 。 
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2. 浏览 器 测试 

浏览 器 是 Web 客户 端 最 核心 的 构件 ,来 自 不 同 厂商 的 浏览 器 对 Java,JavaScript， 
ActiveX,Plug-ins 或 不 同 的 HTML 规格 有 不 同 的 支持 。 例 如 ,ActiveX 是 Microsoft 的 
产品 ,是 为 Internet Explorer 设计 的 ;JavaScript 是 Netscape 的 产品 ,Java 是 Sun 的 产品 
等 。 另 外 ,框架 和 层次 结构 风格 在 不 同 的 浏览 器 中 可 能 有 不 同 的 显示 ,甚至 根本 不 显示 。 
不 同 的 浏览 器 对 安全 性 和 Java 的 设置 也 不 相同 。 
测试 浏览 器 兼容 性 的 一 个 方法 是 创建 一 个 兼容 性 矩阵 ,在 这 个 矩阵 中 测试 不 同 厂商 、 
不 同 版 本 的 浏览 器 对 某 些 构件 和 设置 的 适应 性 。 


3. 分 辨 率 测试 
测试 页 面 在 640X400,600X800 或 1024X768 的 分 辩 率 模式 下 是 否 能 够 显示 正常 ， 
字体 是 否 太 小 或 太 大 ,文本 和 图 片 是 否 对 齐 。 


4. Modem 连接 速率 测试 

应 测试 Web 用 户 通 过 不 同 厂商 生产 的 Modem 上 网 时 的 连接 速度 , 即 测 试用 户 通过 
Modem 链接 到 某 页 面 或 下 载 某 资料 时 所 需要 的 时 间 。 测 试 应 在 平常 的 使 用 环境 下 进行 。 

5. 打印 机 测试 

有 时 ,在 屏幕 上 显示 的 图 片 和 文本 的 对 齐 方式 与 打印 出 来 的 不 一 样 ,这 就 需要 验证 网 
页 打印 是 否 正 常 。 

6. 组 合 测试 

最 后 需要 进行 组 合 测试 ,也 就 是 根据 Web 系统 可 能 的 使 用 环境 对 各 种 软 硬 件 配置 进 
行 组 合 测试 。 
7.4.4 安全 测试 

即使 站 点 不 接受 信用 卡 支付 ,安全 问题 也 是 非常 重要 的 。Web 站 点 收集 的 用 户 资料 
只 能 在 公司 内 部 使 用 ,以 确保 客户 在 进行 交易 时 的 绝对 安全 ;还 应 保证 公司 的 商业 机 密 不 
被 竞争 对 手 或 谈判 客户 获取 。 

1. 目录 设置 测试 

Web 安全 的 第 一 步 就 是 正确 地 设置 目录 。 每 个 目录 下 应 该 有 index. html 或 main. 
html 页 面 ,这 样 就 不 会 显示 该 目录 下 的 所 有 内 容 ,确保 公司 商业 机 密 或 客户 信息 不 被 
泄露 。 

2. SSL 测试 

很 多 站 点 使 用 SSL(Security Socket Layer, 安 全 套 接 字 ) 进 行 安全 传送 。SSL 是 一 种 
加 密 通 信 协 议 ,使 用 SSL 可 以 防止 传送 的 内 容 及 用 户 密码 等 信息 被 黑客 获取 。 

用 户 确定 自己 进入 一 个 SSL 站 点 是 因为 浏览 器 出 现 了 警告 消息 ,而 且 在 地 址 栏 中 的 
到 TTP 克成 下 TTPS: 

如 果 开 发 部 门 使 用 了 SSL ,测试 人 员 就 需要 确定 是 否 有 相应 的 替代 页 面 (适用 于 3.0 
以 下 版 本 的 浏览 器 ,这 些 浏览 器 不 支持 SSL) ;还 应 确认 是 否 有 连接 时 间 限 制 ,以 及 超过 限 


ry 


区 


软件 测试 


制 时 间 后 会 出 现 什么 情况 。 当 用 户 进 入 或 离开 安全 站 点 时 ,应 确认 是 否 有 相应 的 提示 
信息 。 
3. 登录 测试 
有 些 站 点 需要 用 户 进行 登录 ,以 验证 他 们 的 身份 。 对 登录 进行 测试 时 ,可 考虑 如 下 
方面 : 
。 系统 能 否 阻 止 非法 的 用 户 名 或 口令 登录 ,而 对 有 效 的 登录 予以 通过 。 
用 户 登录 在 某 个 时 自若 有 次 数 限制 ,该 限制 是 否 有 效 。 
若 限制 从 某 些 IP 地 址 登录 ,该 机 制 是 否 有 效 。 
。 如 果 对 同一 用 户 登录 有 输入 密码 的 次 数 限制 ,该 机 制 是 否 有 效 。 
。 对 口令 选择 的 限制 的 测试 。 
是 否 可 以 不 登录 而 直接 浏览 某 个 页 面 。 
。 对 Web 应 用 系统 的 超时 限制 (如 用 户 登录 后 在 一 定时 间 内 没有 点 击 任何 页 面 , 则 
需要 重新 登录 才能 正常 使 用 ) 的 测试 。 


4. 日 志文 件 测试 

在 后 台 ,应 注意 验证 服务 器 日 志 工作 是 否 正 常 ,可 考虑 如 下 方面 ， 
。 是 否 记 录 了 所 有 的 事务 处 理 ; 

是 否 记 录 了 失败 的 注册 企图 ; 

。 是否 记录 了 被 盗 信 用 卡 的 使 用 。 

。 是否 在 每 次 事务 完成 的 时 候 都 进行 了 保存 。 

是 否 记 录 了 IP 地 址 。 

是 否 记 录 了 用 户 名 。 


5. 脚本 语言 安全 性 测试 

脚本 语言 是 常见 的 安全 隐患 。 每 种 脚本 语言 的 细节 均 有 所 不 同 ,有 些 脚 本 允许 访问 
根 目录 ,其 他 只 允许 访问 邮件 服务 器 。 经 验 丰 富 的 黑客 可 以 将 服务 器 用 户 名 和 口令 发 送 
给 他 们 自己 ,进而 找 出 该 站 点 使 用 了 哪些 脚本 语言 ,并 研究 该 语言 的 缺陷 从 而 对 站 点 进行 
攻击 。 测 试 时 应 判断 是 否 可 能 发 生 此 种 安全 隐患 。 

此 外 ,测试 人 员 还 要 需要 测试 没有 经 过 授权 ,就 不 能 在 服务 器 端 放置 和 编辑 脚本 等 
问题 。 
7.4.5 接口 测试 

通常 情况 下 ,Web 站 点 不 是 孤立 的 。Web 站 点 可 能 会 与 外 部 服务 器 通信 以 协同 工 
作 , 例 如 请 求 数据 验证 数据 或 提交 订单 。 

1. 服务 器 接口 测试 

第 一 个 需要 测试 的 接口 是 浏览 器 与 服务 器 的 接口 。 测 试 人 员 提 交 事 务 , 然 后 查看 服 
务 器 记录 ,并 验证 在 浏览 器 上 看 到 的 正 是 服务 器 上 发 生 的 。 测 试 人 员 还 可 以 查询 数据 库 ， 
确认 事务 数据 已 正确 保存 。 

这 种 测试 可 以 归 到 功能 测试 中 的 表单 测试 和 数据 校 验 测试 中 。 
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2. 外 部 接口 测试 

有 些 Web 系统 有 外 部 接口 。 例 如 ,网 上 商店 可 能 要 实时 验证 信用 卡 数据 以 减少 欺诈 
行为 的 发 生 。 测 试 的 时 候 ,应 使 用 Web 接口 发 送 一 些 事务 数据 ,分 别 对 有 效 信用 卡 、 无 效 
信用 卡 和 被 盗 信用卡 进行 验证 。 

通常 ,测试 人 员 需 要 确认 软件 能 够 处 理 外 部 服务 器 返回 的 所 有 可 能 的 消息 。 

3. 对 异常 处 理 的 测试 

应 在 充分 理解 用 户 需求 的 基础 上 ,尽量 全 面 地 列 出 各 种 异常 情况 。 例 如 ， 

。 在 处 理 过 程 中 中 断 事务 ， 

。 中 断 用 户 到 服务 器 的 网 络 连接 ， 

。 中 断 Web 服务 器 到 信用 卡 验证 服务 器 的 连接 。 

测试 在 这 些 情况 下 ,系统 能 否 正确 地 处 理发 生 的 异常 。 


7.5 回归 测试 


回归 测试 (Regression Testing ) 是 在 系统 测试 阶段 常 要 面临 的 工作 ,下 面 简 要 介绍 之 。 
7.5.1 回归 测试 的 概念 

软件 在 其 生命 周期 中 时 常 面临 变更 ,软件 的 变更 可 能 源 于 在 测试 中 发 现 了 错误 并 进 
行 了 修改 ,也 可 能 是 因为 在 集成 或 维护 阶段 加 入 了 新 的 模块 。 

当 软 件 中 所 含 错误 被 发 现时 ,如 果 错 误 跟踪 与 管理 系统 不 够 完善 ,就 可 能 会 遗漏 对 这 
些 错 误 的 修改 ;而 开发 者 对 错误 理解 的 不 够 透彻 ,也 可 能 导致 所 做 的 修改 只 修正 了 错误 的 
外 在 表现 ,而 没有 修复 错误 本 身 .从 而 造成 修改 失败 ;修改 还 有 可 能 产生 副作用 从 而 导致 
软件 未 被 修改 的 部 分 产生 新 的 问题 ,使 本 来 工作 正常 的 功能 产生 错误 。 

同样 ,在 有 新 代码 加 入 软件 的 时 候 , 除 了 新 加 入 的 代码 中 有 可 能 含有 错误 外 ,新 代码 
还 有 可 能 对 原 有 的 代码 带 来 影响 。 

为 排除 出 现 上 述 问题 的 可 能 ,应 进行 回归 测试 。 简 单 地 说 ,进行 回归 测试 的 目的 是 验证 修 
改 的 正确 性 及 修改 是 否 对 未 被 修改 部 分 造成 不 良 影响 。 使 用 回归 测试 的 时 机 如 图 7-2 所 示 。 


| | 


发 现 软件 中 加 入 新 代码 
错误 后 改 错 到 软件 中 
1 对 新 代码 或 原 有 
回归 测试 代码 进行 修改 回归 测试 


(a) 改 错 后 进行 回归 测试 (b) 加 入 新 代码 后 进行 回归 测试 
图 7-2 回归 测试 的 使 用 时 机 
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在 实际 测试 工作 中 ,回归 测试 需要 反复 进行 ,给 人 带 来 繁琐 的 感觉 。 因 此 ,需要 通 
过 自动 测试 来 减轻 回归 测试 的 人 工 工作 量 和 提高 回归 测试 的 效率 。 为 了 支持 多 种 回 
归 测 试 策 略 , 自 动 测试 工具 应 该 是 通用 的 和 灵活 的 ,以 满足 达到 不 同 回归 测试 目标 的 
要 求 。 

回归 测试 工具 往往 是 与 功能 测试 工具 融合 在 一 起 的 。 关 于 回归 测试 工具 ,将 在 第 
9 章 中 介绍 。 
7.5.2 回归 测试 策略 

在 集成 测试 、 系 统 测试 甚至 单元 测试 阶段 都 会 进行 多 次 回归 测试 。 在 渐进 和 快速 迭 
代 开 发 中 ,新 版 本 的 连续 发 布 使 回归 测试 进行 得 更 加 频繁 ;而 在 极限 编程 方法 中 ,更 是 要 
求 每 天 都 进行 若干 次 回归 测试 。 因 此 ,选择 正确 的 回归 测试 策略 提高 回归 测试 效率 是 很 
有 必要 的 。 

测试 组 在 实施 测试 的 过 程 中 会 将 所 开发 的 测试 用 例 保 存 到 测试 用 例 库 中 ,并 对 其 进 
行 维护 和 管理 。 当 得 到 一 个 软件 的 基线 (Baseline) 版 本 时 ,用 于 基线 版 本 的 所 有 测试 用 例 
就 形成 了 基线 测试 用 例 库 。 在 进行 回归 测试 的 时 候 , 可 根据 回归 测试 策略 从 基线 测试 用 
例 库 中 提取 合适 的 测试 用 例 进行 回归 测试 。 保 存在 基线 测试 用 例 库 中 的 测试 用 例 可 能 是 
自动 测试 脚本 ,也 有 可 能 是 测试 用 例 的 手工 实现 过 程 。 


1. 测试 用 例 库 的 维护 

随 着 软件 的 改变 ,测试 用 例 库 中 的 一 些 测 试用 例 可 能 会 失去 针对 性 和 有 效 性 ,还 有 一 
些 测试 用 例 将 完全 不 能 运行 ,必须 删除 测试 用 例 库 中 这 一 些 测 试用 例 。 

同时 ,被 修改 的 或 新 增添 的 软件 功能 ,仅仅 靠 重新 运行 以 前 的 测试 用 例 并 不 足以 揭示 
其 中 的 问题 ,有 必要 追加 新 的 测试 用 例 来 测试 这 些 新 的 功能 或 特征 。 因 此 ,测试 用 例 库 的 
维护 工作 还 应 包括 开发 新 测试 用 例 。 

此 外 , 随 着 项 目的 进展 ,测试 用 例 库 中 的 用 例会 不 断 增加 ,其 中 会 出 现 一 些 对 输入 或 
运行 状态 十 分 敏感 的 测试 用 例 。 这 些 测试 不 容易 重复 且 结 果 难 以 控制 ,会 影响 回归 测试 
的 效率 ,需要 进行 改进 ,使 其 达到 可 重复 和 可 控制 的 要 求 。 


2. 测试 用 例 的 选择 方法 

在 计划 回归 测试 时 ,常用 的 选择 测试 用 例 的 方法 如 下 。 

(1) 再 测试 全 部 用 例 

选择 基线 测试 用 例 库 中 的 全 部 测试 用 例 组 成 回归 测试 包 , 这 是 一 种 比较 安全 的 方法 。 
再 测试 全 部 用 例 具有 最 低 的 遗漏 回归 错误 的 风险 ,但 测试 成 本 最 高 。 全 部 再 测试 几乎 可 
以 应 用 到 所 有 情况 ,基本 上 不 需要 进行 分 析 和 重新 开发 。 但 是 , 随 着 开发 工作 的 进展 , 测 
试用 例 不 断 增多 ,重复 原先 所 有 的 测试 将 带 来 非常 大 的 工作 量 和 高 昂 的 成 本 。 

(2) 基于 风险 选择 测试 

可 以 基于 一 定 的 风险 标准 从 基线 测试 用 例 库 中 选择 回归 测试 包 。 例 如 ,首先 运行 最 
重要 的 .关键 的 测试 用 例 ,而 跳 过 那些 非 关 键 的 .优先 级 别 低 的 或 者 高 稳定 的 测试 用 例 。 

(3) 基于 操作 剖面 选择 测试 

若 基线 测试 用 例 库 的 测试 用 例 是 基于 软件 操作 前 面 开 发 的 ,测试 用 例 的 分 布 情 况 反 
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映 了 系统 的 实际 使 用 情况 , 则 在 回归 测试 中 可 优先 选择 那些 针对 最 重要 或 最 频繁 使 用 功 
能 的 测试 用 例 ,释放 和 缓解 最 高 级 别 的 风险 ,这 有 助 于 尽早 发 现 那些 对 可 靠 性 有 最 大 影响 
的 故障 。 此 方法 可 以 在 给 定 的 预算 下 最 有 效 地 提高 系统 可 靠 性 。 


7.6 系统 测试 步 又 


为 了 成 功 地 进行 系统 测试 ,应 遵循 一 定 的 步 又 。 系 统 测试 的 步骤 如 下 ， 

GD 编制 系统 测试 计划 。 

@ 设计 系统 测试 用 例 。 

@ 审批 系统 测试 计划 。 

@ 执行 系统 测试 。 

@ 分 析 系 统 测试 结果 ,提交 测试 报告 ,并 改进 系统 。 

1. 系统 测试 计划 的 编制 

根据 软件 测试 V 模型 ,系统 测试 计划 的 编制 可 在 需求 分 析 完 成 之 后 就 开始 进行 (其 
至 可 以 在 需求 分 析 过 程 中 进行 )。 在 计划 的 编制 中 应 主要 完成 如 下 任务 : 

(1) 系统 测试 内 容 和 测试 类 型 的 确定 。 应 根据 软件 项 目的 特点 、 开 发 的 预期 要 求 . 软 
件 的 运行 环境 等 多 方面 因素 ,从 前 面 介绍 的 诸多 系统 测试 类 型 中 选择 若干 种 (当然 最 好 是 
将 每 种 类 型 都 执行 到 ) ,确定 每 种 系统 测试 类 型 的 具体 策略 ,以 及 对 它们 的 执行 顺序 , 且 将 
能 用 测试 工具 完成 的 测试 部 分 确定 下 来 。 

(2) 确定 系统 测试 进度 。 

(3) 确定 系统 测试 小 组 的 人 员 分 工 。 

(4) 建立 系统 测试 环境 ,选择 (或 自行 开发 ) 和 安装 系统 测试 工具 。 


2. 系统 测试 用 例 的 设计 
应 根据 每 种 系统 测试 类 型 的 具体 策略 设计 系统 测试 用 例 ,能 够 用 测试 工具 执行 的 用 
例 应 当 对 其 脚本 化 。 


3. 系统 测试 计划 的 审批 

应 对 系统 测试 计划 进行 评审 ,对 测试 计划 的 框架 和 细节 进行 讨论 ,有 修改 建议 时 应 及 
时 反馈 并 文档 化 。 若 系统 测试 计划 获得 批准 ,应 有 一 个 正式 签名 的 过 程 。 

4. 系统 测试 的 执行 

根据 系统 测试 计划 和 事先 确定 的 系统 测试 用 例 执 行 系统 测试 ,并 详细 记录 测试 过 程 
中 发 现 的 问题 。 系 统 测试 不 是 一 个 一 趴 而 就 的 过 程 , 可 能 会 有 多 次 的 回归 测试 。 

5. 分 析 系 统 测 试 结果 ,提交 测试 报告 并 改进 系统 

对 系统 测试 的 结果 进行 细致 .深入 的 分 析 , 根 据 系 统 测试 的 全 过 程 提交 系统 测试 报 
告 。 并 根据 系统 测试 中 发 现 的 问题 对 应 用 系统 进行 必要 的 改进 ,以 对 其 进行 优化 。 
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7.7 验收 测试 


7.7.1 验收 测试 的 概念 

验收 测试 是 软件 正式 交付 使 用 之 前 的 最 后 一 道 测试 工序 。 软 件 开发 的 最 终 目的 是 满 
足 用 户 的 需要 ,所 以 验收 测试 是 以 用 户 为 主 进行 的 测试 ,软件 开发 人 员 、SQA 人 员 也 应 
参与 。 

验收 测试 检验 最 终 软 件 产品 与 用 户 预 期 的 需求 是 否 一 致 ,决定 软件 是 否 可 被 用 户 接 
受 。 验 收 测试 应 着 重 考虑 软件 是 否 满足 合同 规定 的 所 有 功能 ,性 能 及 其 他 特性 。 

验收 测试 的 结果 有 两 种 可 能 : 一 种 是 功能 ,性 能 等 各 项 指标 满足 软件 需求 规格 说 明 
的 要 求 ,用 户 可 以 接受 ; 另 一 种 是 软件 不 满足 需求 规格 说 明 的 要 求 , 用 户 无 法 接受 。 项 目 
进行 到 这 个 阶段 才 发 现 严重 错误 和 偏差 一 般 很 难 在 预定 的 工期 内 改正 ,因此 必须 与 用 户 
协商 ,寻求 一 个 妥善 解决 问题 的 方法 。 
7.7.2 验收 测试 的 策略 

验收 测试 的 策略 通常 有 正式 验收 、 非 正式 验收 或 测试 .8 测试 4 种 ,选择 验收 测试 
的 策略 通常 建立 在 合同 需求 .组织 公司 标准 ,以 及 应 用 领域 要 求 的 基础 之 上 。 


1. 正式 验收 

正式 验收 的 过 程 如 下 : 

Q@ 软件 需求 分 析 。 了 解 软件 功能 和 性 能 要 求 . 软 硬件 环境 要 求 等 ,特别 需要 了 解 软 
件 的 质量 要 求 和 验收 要 求 。 

@ 编制 “验收 测试 计划 ”和 ”项 目 验 收 准则 ”。 根 据 软件 需求 和 验收 要 求 编制 测试 计 
划 ,制定 需 测试 的 测试 项 ,制定 测试 策略 及 验收 通过 准则 ,并 经 过 客户 参与 的 计划 评审 。 

@ 设计 测试 用 例 。 根 据 “ 验 收 测试 计划 ”和 “项 目 验收 准则 ”编制 测试 用 例 , 并 经 过 
评审 。 

@ 搭建 测试 环境 。 建 立 测试 的 软 、 硬 件 及 网 络 环境 (不 应 是 开发 环境 ,可 在 委托 客户 
提供 的 环境 中 进行 测试 ) 。 

@ 实施 测试 。 测 试 并 记录 测试 结果 。 

@ 分 析 测试 结果 。 根 据 验收 通过 准则 分 析 测 试 结 果 , 对 测试 进行 评价 ,并 确认 验收 
是 否 通过 。 

@ 编制 并 提交 测试 报告 。 根 据 测试 结果 编制 缺陷 报告 和 验收 测试 报告 ,并 提交 
客户 

正式 验收 测试 是 一 个 需要 严格 规划 和 组 织 的 过 程 , 它 通常 是 系统 测试 的 延续 ,选择 的 
测试 用 例 应 该 是 系统 测试 中 所 执行 测试 用 例 的 子 集 。 在 很 多 组 织 中 ,正式 验收 测试 是 完 
全 自动 执行 的 。 

正式 验收 测试 可 由 开发 小 组 (或 其 独立 的 测试 小 组 ) 与 最 终 用 户 组 织 的 代表 来 执行 ， 
也 可 能 完全 由 最 终 用 户 团队 执行 ,或 者 由 最 终 用 户 团 队 选 择 人 员 组 成 一 个 客观 公正 的 小 
组 来 执行 。 
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正式 验收 的 主要 优点 是 测试 可 以 自动 执行 ,支持 回归 测试 ,并 可 以 对 测试 过 程 进行 评 
测 和 监测 :不足 之 处 主要 是 要 求 大 量 的 资源 和 周密 的 计划 ,测试 可 能 是 系统 测试 的 再 次 实 
施 ,测试 成 本 有 一 定 的 浪费 。 


2. 非 正式 验收 

在 非 正式 验收 中 ,测试 过 程 不 像 正式 验收 测试 那样 严格 ,显得 比较 主观 。 非 正式 验收 
测试 也 应 事先 确定 测试 项 ,但 这 是 由 各 测试 员 自 行 决定 的 。 

大 多 数 情况 下 , 非 正式 验收 是 由 最 终 用 户 执行 的 。 

非 正式 验收 与 正式 验收 相 比 ,可 以 发 现 更 多 意料 之 外 的 软件 缺陷 (例如 用 户 操作 方式 
有 误 时 软件 不 能 恰当 处 理 ) ,但 由 于 缺乏 严格 的 计划 组 织 , 非 正式 测试 发 现 的 错误 往往 是 
有 限 的 。 

关于 a 测试 和 有 测试 可 参见 第 2. 2. 2 小 节 。 


7.8 小 结 


确认 测试 ,系统 测试 和 验收 测试 都 属于 收尾 阶段 的 测试 活动 ,用 来 保证 软件 产品 达到 
了 需求 规格 说 明 书 中 关于 软件 功能 .性 能 及 其 他 特性 的 各 项 要 求 , 并 能 最 终 满足 用 户 的 各 
项 需求 ,能 为 用 户 所 接受 。 

这 3 种 测试 活动 的 工作 有 较 大 的 相似 之 处 ,在 业界 也 往往 没有 被 严格 区 分 ,但 我 们 仍 
应 注意 它们 之 间 的 区 别 : 确认 测试 可 以 认为 是 系统 测试 的 一 部 分 ,以 功能 测试 为 主 ;系统 
测试 则 强调 将 软件 与 系统 中 其 他 要 素 集成 起 来 ,测试 其 能 否 正常 工作 ,系统 测试 不 仅 关注 
功能 的 实现 ,还 关注 性 能 及 其 他 重要 特性 (如 安全 性 、 兼 容 性 、 界 面 友 好 性 等 ) 是 否 达 到 预 
期 的 要 求 ;验收 测试 则 是 以 用 户 为 主 进行 的 测试 活动 ,是 软件 交付 使 用 之 前 的 最 后 一 道 测 

性 能 测试 是 系统 测试 中 的 重要 环节 ,应 掌握 性 能 测试 的 几 种 主要 类 型 及 性 能 测试 的 
策略 。 

基于 Web 的 系统 测试 比 一 般 应 用 的 系统 测试 更 为 复杂 ,可 通过 它 了 解 系统 测试 的 各 
个 侧面 。 


习 题 


. 确认 测试 的 任务 是 什么 ? 确认 测试 主要 包括 哪些 具体 活动 ? 

. 性 能 测试 主要 包括 哪 几 种 类 型 ? 分 别 解释 它们 的 含义 。 

.全面 性 能 测试 模型 的 含义 是 什么 ”如 何在 具体 项 目的 性 能 测试 中 合理 地 使 用 它 ? 
. 安全 性 测试 的 目的 是 什么 ? 

健壮 性 测试 的 含义 是 什么 ? 它 包 括 哪 几 种 测试 ? 

. 如 何 衡量 软件 产品 的 可 靠 性 ? 

. 配置 测试 和 兼容 性 测试 的 区 别 是 什么 ? 

. 用 户 界 面 测试 ,文档 测试 及 安装 测试 的 目的 分 别 是 什么 ? 
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pa 9. 基于 Web 的 系统 测试 主要 包括 哪些 方面 ? 
10. 系统 测试 与 集成 测试 的 区 别 是 什么 ? 
11. 何 时 应 进行 回归 测试 ?回归 测试 的 作用 是 什么 ? 
12. 在 不 断 进行 回归 测试 的 过 程 中 ,如 何 对 测试 用 例 库 进行 维护 ? 
13. 在 计划 回归 测试 时 ,选择 测试 用 例 的 方法 有 哪些 ” 试 分 别 解释 之 。 
14. 常用 的 验收 测试 策略 有 哪儿 种 ?各 有 何 优 缺 点 ? 
15. 确认 测试 ,系统 测试 和 验收 测试 三 者 的 主要 区 别 是 什么 ”应 分 别 由 何 种 人 员 来 
执行 ? 
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面向 对 象 软件 的 测试 


本 章 要 点 : 


。 面向 对 象 的 基本 概念 。 

。 面向 对 象 方法 的 优 缺 点 。 

面向 对 象 软件 的 特点 及 其 对 软件 测试 的 影响 。 
面向 对 象 软件 的 测试 模型 。 

。 面向 对 象 软件 的 单元 测试 。 

面向 对 象 软件 的 集成 测试 。 


面向 对 象 是 目前 主流 的 软件 开发 方法 ,占据 了 软件 开发 的 绝 大 部 分 领地 。 面 向 对 象 
方法 有 着 与 传统 开发 方法 完全 不 同 的 思维 视角 ,这 使 得 面向 对 象 软件 也 与 传统 软件 有 着 
诸多 不 同 的 特性 ,这 些 特 性 使 传统 的 测试 方法 在 面向 对 象 软件 的 测试 中 基本 难以 适用 。 
本 章 介绍 面向 对 象 方法 的 一 些 基 本 概念 和 面向 对 象 软件 测试 的 重要 性 ,以 及 面向 对 象 软 
件 的 特点 对 软件 测试 的 影响 ,最 后 通过 面向 对 象 软件 的 测试 模型 详细 阐述 了 面向 对 象 软 
件 测试 各 部 分 的 概念 和 实施 策略 。 


8.1 面向 对 象 开发 方法 概述 


面向 对 象 (Object Oriented,OO) 开 发 是 20 世纪 90 年 代 以 来 软件 开发 方法 的 主流 。 
面向 对 象 的 概念 和 应 用 已 超越 程序 设计 ,扩展 到 很 多 领域 ,例如 数据 库 系 统 、 交 互 式 界面 、 
应 用 结构 、 应 用 平台 、 分 布 式 系统 、 网 络 管理 结构 .CAD 技术 、 人 工 智能 等 领域 。 
8.1.1 面向 过 程 开发 方法 的 不 足 

面向 过 程 的 开发 方法 关注 解决 问题 的 过 程 ,而 不 关心 问题 领域 的 实体 。 它 对 过 程 进 
行 抽象 ,采用 “ 自 顶 向 下 ,逐步 求 精 ” 的 思路 对 要 实现 的 功能 模块 进行 逐 层 分 解 ,从 而 简化 
问题 的 实现 。 

面向 过 程 方法 是 一 种 成 熟 的 开发 方法 ,然而 在 大 型 软件 的 开发 中 ,面向 过 程 方法 则 显 
得 力不从心 ,主要 是 因为 它 存在 如 下 不 足 之 处 。 
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1. 软件 重用 性 差 

软件 重用 是 软件 工程 追求 的 目标 之 一 。 所 谓 软件 重用 ,是 指 在 不 同 的 软件 开发 过 程 
中 重复 使 用 相同 或 相似 软件 元 素 的 过 程 。 这 里 所 说 的 软件 元 素 包 括 源 代码 ,测试 用 例 、 设 
计 文 档 、 设 计 过 程 、 需 求 分 析 文 档 等 ,可 将 这 些 软件 元 素 称 为 软 部 件 。 

由 于 面向 过 程 的 开发 是 以 过 程 为 中 心 的 ,没有 引入 对 象 和 类 的 概念 ,更 没有 继承 的 机 
制 ,而且 封装 机 制 也 不 够 强大 ,所 以 面向 过 程 方法 开发 出 的 软件 的 部 件 重用 性 较 差 。 


2. 安全 性 差 
封装 机 制 不 如 面向 对 象 方法 强大 , 故 安全 性 不 如 面向 对 象 软件 ,这 一 点 在 面向 对 象 方 
法 的 介绍 中 可 以 看 出 。 


3. 软件 稳定 性 和 可 维护 性 差 

用 面向 过 程 方法 开发 大 型 的 .复杂 的 软件 时 ,开发 初期 难以 明确 全 部 需求 ,在 开发 过 
程 中 常常 面临 需求 变更 的 情况 ,此 时 面向 过 程 软件 就 会 表现 出 较 差 的 适应 性 和 稳定 性 。 
这 是 因为 面向 过 程 的 方法 是 围绕 实现 处 理 功能 的 “过 程 "来 构造 系统 的 。 然 而 ,用 户 需 求 
的 变化 大 部 分 是 针对 功能 的 ,因此 这 种 变化 对 于 基于 过 程 的 设计 来 说 是 灾难 性 的 。 用 户 
需求 的 变化 往往 造成 系统 结构 的 较 大 变化 ,为 实现 这 些 变 化 往往 需要 付出 极 大 的 代价 , 即 
使 如 此 还 可 能 不 能 满足 用 户 的 全 部 需求 。 

此 外 ,对 面向 过 程 软件 的 维护 成 本 也 比较 高 ,其 原因 是 软件 的 可 修改 性 、 可 测试 性 差 ， 
导致 维护 困难 。 
8.1.2 面向 对 象 的 基本 概念 

关于 面向 对 象 ,有 许多 不 同 的 观点 。Coad 和 Yourdon 曾 给 出 如 下 定义 : 

面向 对 象 (object oriented) 王 对 象 (object) 十 类 (class) 十 继承 Cinheritance) 
十 消息 通信 (message communication) 

也 就 是 说 , 若 某 软件 的 开发 过 程 中 用 到 了 以 上 4 个 概念 (或 机 制 ) , 则 该 开发 过 程 是 面向 对 
象 的 。 

下 面对面 向 对 象 方法 中 最 基本 的 概念 进行 简要 的 介绍 。 


1. 对 象 

对 象 是 现实 世界 中 存在 的 一 个 事物 。 对 象 可 以 是 具体 的 ,例如 一 张 桌子 :也 可 以 是 抽 
象 的 ,例如 一 个 开发 项 目 或 一 个 计划 。 

在 面向 对 象 开发 中 ,对 象 就 是 模块 , 它 是 把 数据 结构 和 操作 这 些 数据 的 方法 紧密 地 结 
合 在 一 起 而 构成 的 模块 。 


2. 类 和 实例 

具有 相同 特征 和 行为 的 所 有 对 象 构 成 一 个 类 ,属于 某 个 类 的 对 象 称 为 该 类 的 实例 
(instance) 。 例 如 , 张 三 \ 李 四 、 王 五 是 不 同 的 对 象 , 但 他 们 有 相同 的 特征 和 行为 ,因为 他 们 
都 是 学 生 , 故 “学 生 ” 是 从 张 三 、 李 四 、 王 五 抽象 出 来 的 类 , 张 三 、 李 四 、 王 五 这 几 个 对 象 则 是 
“学 生 ” 类 的 实例 。 

类 抽象 地 描述 了 属于 该 类 的 全 部 对 象 的 属性 (用 数据 结构 表示 ) 和 操作 (也 称 为 服务 
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或 方法 ,在 C++ 语言 中 即 成 员 函 数 )。 可 将 类 看 作 一 个 抽象 数据 类 型 (Abstract Data 
Type,ADT) 的 实现 。 


3. 继承 

继承 是 子 类 (也 称 派 生 类 ) 自动 共享 其 父 类 和 祖先 类 属性 和 操作 ( 即 共性 部 分 ) 的 一 种 
机 制 。 子 类 在 继承 共性 部 分 的 基础 上 ,还 可 以 增加 自身 特有 的 属性 和 操作 。 当 然 , 若 不 合 
适 , 子 类 也 可 放弃 对 父 类 和 祖先 类 中 某 些 特性 的 继承 。 

例如 ,轿车 、 货 车 、 摩 托 车 、 救 护 车 是 不 同 种 类 的 车 辆 ,分 别 对 应 一 个 类 ,但 通过 分 析 发 
现 ,它们 具有 共性 一 一 都 是 机 动车 , 故 可 建立 一 个 父 类 一 一 机 动车 类 ;轿车 类 、 货 车 类 、 摩 
托 车 类 .救护 车 类 则 是 机 动车 类 的 子 类 。 建 立 子 类 、 父 类 的 继承 机 制 后 , 则 可 把 这 4 个 子 
类 的 共性 部 分 放 在 父 类 中 定义 ,避免 了 类 中 的 重复 定义 。 

子 类 只 继承 一 个 父 类 的 属性 和 操作 , 称 为 单 重 继承 ; 子 类 若 继承 了 多 个 父 类 的 属性 和 
操作 , 则 称 为 多 重 继承 。 例 如 ,党 员 和 研究 生 作 为 两 个 父 类 ,研究 生 党 员 继承 了 两 者 的 共 
性 ,就 属于 多 重 继承 。 

继承 是 面向 对 象 开发 方法 独 有 的 机 制 。 继 承 机 制 的 优点 如 下 : 

(1) 使 共有 的 属性 和 操作 能 够 共享 ,避免 了 类 中 的 重复 定义 ,增加 了 代码 的 可 重 
用 性 。 

(2) 由 于 代码 重用 性 高 ,因而 缩短 了 代码 的 总 长 度 , 使 程序 简短 、 结 构 清 晰 、 易 于 
理解 。 

(3) 对 于 具有 继承 关系 的 父 类 和 多 个 子 类 的 相同 部 分 的 修改 ,只 需 在 父 类 中 进行 
即 可 。 

4. 消息 

两 个 对 象 之 间 的 通信 单元 称 为 消息 , 它 是 要 求 接收 消息 的 对 象 执行 类 中 定义 的 某 些 
操作 的 规格 说 明 。 消 息 机 制 类 似 于 面向 过 程 开 发 中 的 函数 调用 。 

5. 封装 

封装 (encapsulation) 也 可 以 理解 为 信息 隐藏 。 对 象 是 封装 的 最 基本 单位 ,类 定义 将 
其 说 明 ( 用 户 可 见 的 外 部 接口 ) 与 实现 (用 户 不 可 见 的 内 部 实现 ) 显 式 地 分 开 , 其 内 部 实现 
按照 具体 定义 的 作用 域 提 供 保 护 。 

虽然 面向 过 程 开 发 方法 也 有 封装 ,但 面向 对 象 的 封装 比 面向 过 程 开发 中 的 封装 更 为 
强大 、 有 力 。 

封装 机 制 具 有 如 下 优点 : 

(1) 简化 了 对 对 象 的 使 用 。 外 部 程序 仅 通 过 接口 访问 对 象 ,而 不 必 知道 对 象 内 部 的 
具体 实现 。 

(2) 为 软件 模块 的 安全 性 提供 了 强 有 力 的 保障 ,因为 对 象 内 部 数据 结构 是 不 能 被 外 
界 访问 的 。 

(3) 减少 了 类 之 间 的 相互 依赖 ,使 程序 结构 更 为 紧凑 、 清 晰 ,提高 了 软件 部 件 的 重用 
性 ,使 得 对 软件 的 修改 、 测 试 、 维 护 等 工作 更 易于 进行 。 


. 
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6. 抽象 

抽象 有 两 方面 的 意义 。 一 方面 ,尽管 问题 域 中 的 事物 是 复杂 的 ,但 分 析 人 员 并 不 需要 
了 解 和 描述 它们 的 一 切 , 只 需要 分 析 研 究 其 中 与 系统 目标 有 关 的 事物 及 其 本 质 特征 ; 另 一 
方面 ,通过 舍弃 个 体 事物 在 细节 上 的 差异 ,抽取 其 共同 特征 而 得 到 一 批 事 物 的 抽象 概念 。 

与 面向 过 程 仅 支持 过 程 抽象 不 同 ,面向 对 象 方法 中 的 抽象 原则 包括 过 程 抽象 和 数据 
抽象 两 个 方面 。 

过 程 抽象 是 指 任何 一 个 完成 确定 功能 的 操作 序列 ,其 使 用 者 都 可 以 把 它 看 作 一 个 单 
一 的 实体 ,尽管 实际 上 它 可 能 是 由 一 系列 更 低级 的 操作 完成 的 。 

数据 抽象 根据 施加 于 数据 之 上 的 操作 来 定义 数据 类 型 ,并 限定 数据 的 值 只 能 由 这 些 
操作 来 修改 和 查看 。 数 据 抽象 是 面向 对 象 开 发 方法 的 核心 原则 。 它 强调 把 属性 (数据 结 
构 ) 和 操作 (服务 ) 结 合 为 一 个 不 可 分 的 单位 ( 即 对 象 ) ,对象 的 外 部 只 需要 知道 它 做 什么 ， 
而 不 必 知 道 它 如 何 做 。 数 据 抽象 是 通过 封装 机 制 实现 的 。 

7. 多 态 性 

一 个 操作 在 不 同 的 类 中 可 以 有 不 同 的 实现 方式 , 称 为 多 态 性 (polymophism)。 因 此 ， 
属于 不 同类 的 对 象 , 收 到 同一 消息 却 可 以 产生 不 同 的 结果 。 

多 态 性 增强 了 软件 的 灵活 性 、 重 用 性 和 可 维护 性 。 
8.1.3 面向 对 象 开发 方法 的 优点 

通过 以 上 叙述 ,面向 对 象 开发 的 优点 归纳 如 下 。 


1. 软件 重用 性 高 
由 于 面向 对 象 方法 有 强大 的 封装 机 制 和 继承 机 制 ,使 得 用 该 方法 开发 出 来 的 软件 部 
件 重 用 性 高 。 


重用 性 高 带 来 了 两 个 好 处 ,一 是 能 提高 开发 的 效率 ; 另 一 个 是 当 重 用 软 部 件 时 ,由 于 
使 用 的 是 已 被 测试 过 的 部 件 , 因 而 使 系统 出 错 的 可 能 性 大 大 减 小 。 

2. 安全 性 高 

由 于 对 软件 中 的 基本 单位 
问 ,提高 了 软件 模块 的 安全 性 。 


3. 软件 可 维护 性 高 
在 既定 的 继承 结构 中 , 若 需 对 类 进行 修改 时 ,共性 部 分 的 修改 可 以 仅 在 父 类 中 进行 。 
封装 机 制 也 使 得 对 象 之 间 的 依赖 性 减少 ,便于 对 某 个 类 的 修改 ,测试 和 维护 。 


4. 容易 扩展 

利用 面向 对 象 开发 中 的 继承 机 制 , 能 清晰 地 定义 和 使 用 模块 ( 即 对 象 ) ,即使 模块 的 功 
能 不 完善 ,允许 对 它们 进行 扩展 而 对 其 他 模块 的 改动 很 少 。 这 使 系统 更 灵活 、 更 容易 扩 
展 ,而 且 费 用 更 低 。 

5. 适用 于 大 型 .复杂 项目 

面向 对 象 软件 在 可 重用 性 、 可 维护 性 方面 的 优点 使 得 它 特别 适合 于 大 型 的 .复杂 的 软 


对 象 进行 了 封装 ,对 象 的 内 部 数据 结构 不 能 被 外 界 访 
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件 项 目 , 例 如 前 期 需求 不 明确 的 项 目 ,或 采用 原型 方法 开发 的 项 目 , 它 对 需求 变更 的 适应 
性 远 远 强 于 面向 过 程 的 开发 方法 。 
8.1.4 统一 建 模 语言 UML 简介 

统一 建 模 语言 (Unified Modeling Language,UML) 是 一 种 定义 良好 、 易 于 表达 、 功 能 
强大 且 普 遍 适 用 的 建 模 语 言 ,为 面向 对 象 软件 提供 了 强大 的 建 模 工 具 。 它 溶 和 人 了 软件 工 
程 领域 的 新 思想 新 方法 和 新 技术 。 它 的 作用 域 不 仅 限于 支持 面向 对 象 的 分 析 与 设计 ,还 
支持 从 需求 分 析 开 始 的 软件 开发 的 全 过 程 。 目 前 ,已 有 一 些 基于 UML 的 可 视 化 建 模 工 
具 , 如 IBM Rational 公司 的 Rose。 

UML 是 一 种 图 形 化 建 模 语言 , 它 使 用 不 同类 型 的 图 从 不 同 的 角度 和 抽象 层次 描述 
系统 模型 。UML 中 的 一 些 图 形 可 作为 面向 对 象 软件 测试 的 依据 。 事 实 上 ,基于 UML 
的 测试 是 软件 测试 中 的 研究 热点 ,并 由 此 产生 很 多 实验 性 工具 。 

因此 ,在 介绍 面向 对 象 软件 测试 之 前 , 先 简要 地 介绍 UML 的 图 形 表示 法 。 

UML 主要 提供 了 以 下 5 类 图 用 于 面向 对 象 建 模 。 


1. 用 例 图 (Use Case Diagram) 
用 例 图 展现 了 一 组 用 例 和 参与 者 ,以 及 它们 之 间 的 关系 。 它 在 一 个 较 高 的 抽象 层次 
上 从 外 部 执行 者 的 角度 描述 系统 功能 。 


2. 静态 图 (Static Diagram) 

包括 类 图 、 对 象 图 和 包 图 。 其 中 ,类 图 不 仅 说 明了 各 个 类 的 内 部 结构 , 即 类 的 属性 和 
操作 ,而 且 描述 了 类 之 间 泛 化 ( 即 继承 ) 聚集. 关联、 依赖 等 静态 关系 。 对 象 图 是 类 图 的 实 
例 化 表示 ,几乎 使 用 与 类 图 完全 相同 的 标识 ,一 个 对 象 图 即 类 图 的 一 个 实例 。 由 于 对 象 存 
在 生命 周期 ,因此 对 象 图 只 能 在 面向 对 象 系统 的 某 一 个 时 间 段 内 存在 。 包 由 包 或 类 组 成 ， 
表示 包 与 包 之 间 的 关系 。 包 图 用 于 描述 系统 的 分 层 结构 。 


3. 行为 图 (Behavior Diagram) 

行为 图 用 于 描述 系统 的 动态 模型 和 组 成 对 象 间 的 交互 关系 ,包括 状态 图 和 活动 图 。 
其 中 ,状态 图 (State Diagram) 作 为 类 图 的 补充 ,用 来 描述 一 个 特定 对 象 的 所 有 可 能 状态 ， 
以 及 引起 状态 转移 的 事件 ,表示 单个 对 象 在 其 生命 周期 中 的 全 部 行为 。 状 态 图 展现 了 一 
个 状态 机 ,属于 系统 的 动态 视图 。 由 于 状态 图 强调 单个 对 象 行为 的 事件 顺序 ,因而 它 对 于 
类 测试 有 着 重要 的 意义 。 活 动 图 (Activity Diagram) 描 述 满足 用 例 要 求 所 要 进行 的 活动 ， 
以 及 活动 间 的 约束 关系 ,有 利于 识别 并 行 活动 。 

4. 交互 图 (Interactive Diagram) 

交互 图 用 于 描述 对 象 间 的 交互 关系 ,包括 顺序 图 和 合作 图 。 其 中 ,顺序 图 (Sequence 
Diagram) 显 示 对 象 之 间 的 动态 交互 关系 ,着 重 于 体现 对 象 之 间 消 息 传递 的 时 间 顺 序 ; 合 
作 图 (Collaboration Diagram) 描 述 相互 合作 的 对 象 间 的 交互 关系 和 链接 关系 。 顺 序 图 和 
合作 图 都 是 描述 对 象 之 间 的 交互 关系 ,但 两 者 的 侧重 点 不 同 ,顺序 图 着 重 体现 对 象 间 交互 
的 时 间 顺 序 ,而 合作 图 则 着 重 体现 交互 对 象 间 的 静态 链接 关系 。 在 使 用 交互 图 时 , 若 强调 
时 间 和 顺序 ,应 使 用 顺序 图 ;如 果 强 调 上 下 级 关系 , 宜 选择 合作 图 。 


e、 
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5. 实现 图 (Implementation Diagram) 

包括 构件 图 和 配置 图 。 其 中 ,构件 图 描述 代码 部 件 的 物理 结构 及 各 部 件 之 间 的 依赖 
关系 。 一 个 部 件 可 能 是 一 个 资源 代码 部 件 .一 个 二 进 制 部 件 或 一 个 可 执行 部 件 , 它 包含 逻 
辑 类 或 实现 类 的 有 关 信 息 。 构 件 图 有 助 于 分 析 和 理解 部 件 之 间 的 相互 影响 程度 。 配 置 图 
定义 了 系统 中 软 硬 件 的 物理 体系 结构 。 它 可 以 显示 实际 的 计算 机 和 设备 (用 节点 表示 ) 及 
它们 之 间 的 连接 关系 ,也 可 显示 连接 的 类 型 及 部 件 之 间 的 依赖 性 。 在 节点 内 部 ,放置 可 执 
行 部 件 和 对 象 以 显示 节点 与 可 执行 软件 单元 的 对 应 关系 。 

若 将 UML 的 建 模 机 制 分 为 静态 建 模 机 制 和 动态 建 模 机 制 两 类 ,应 用 例 图 、 类 图 、 包 
图 .对 象 图 .构件 图 和 配置 图 6 种 图 形 , 属 于 UML 的 静态 建 模 机 制 , 而 状态 图 、 活 动 图 、 顺 
序 图 和 合作 图 4 种 图 形 属于 UML 的 动态 建 模 机 制 。 
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8.2.1 面向 对 象 软件 测试 的 重要 性 

正 是 由 于 面向 对 象 开发 有 如 此 多 的 优秀 特性 ,使 得 它 被 看 成 是 解决 软件 危机 的 新 兴 
技术 ,已 占据 了 软件 开发 的 绝 大 部 分 领地 。 面 向 对 象 开发 有 着 更 规范 的 编程 风格 ,更 好 的 
系统 结构 , 极 大 地 优化 了 数据 使 用 的 安全 性 ,提高 了 软件 部 件 的 重用 性 和 可 维护 性 。 那 
么 ,面向 对 象 软件 是 否 还 需要 进行 严格 的 测试 ? 测试 对 于 面向 对 象 软件 的 成 功 开 发 还 有 
意义 吗 ? 

事实 上 ,测试 对 于 面向 对 象 软件 的 开发 有 着 极为 重要 的 作用 ,面向 对 象 软件 的 质量 在 
很 大 程度 上 取决 于 测试 工作 ,主要 原因 如 下 : 

(1) 尽管 面向 对 象 开发 方法 提供 了 一 系列 可 使 人 们 以 更 高 的 效率 开发 出 高 质量 软件 
的 机 制 , 如 封装 继承、 多 态 等 ,但 最 终 软 件 的 质量 如 何 ,还 与 开发 过 程 中 技术 实施 的 具体 
情况 有 关 , 与 开发 人 员 的 水 平 有 关 。 面 向 对 象 的 开发 与 面向 过 程 的 开发 一 样 , 都 是 主要 是 
由 人 来 完成 的 ,错误 往往 是 不 可 避免 的 , 故 需要 严格 测试 。 

(2) 面向 对 象 软件 部 件 的 重用 率 高 , 若 不 尽早 进行 严格 的 测试 ,错误 的 繁衍 将 给 后 期 
测试 活动 及 软件 维护 带 来 极 大 的 麻烦 。 

(3) 面向 对 象 开发 与 面向 过 程 开发 有 很 大 的 不 同 ,主要 表现 在 它 引 入 了 一 些 新 的 机 
制 , 如 继承 .封装 .多 态 等 ,这 些 机 制 的 使 用 给 面向 对 象 软件 带 来 了 新 的 出 错 的 可 能 性 ,使 
得 测试 的 侧重 点 发 生 较 大 的 变化 。 也 就 是 说 ,应 重点 针对 这 些 机 制 的 使 用 对 软件 进行 测 
试 , 若 忽略 这 些 方面 测试 的 重要 性 ,面向 对 象 软件 的 质量 是 得 不 到 保证 的 。 继 承 .封装 、 多 
态 等 机 制 对 于 面向 对 象 软件 测试 的 影响 将 在 8. 2. 2 小 节 中 描述 。 

8.2.2 面向 对 象 软件 的 特点 及 其 对 软件 测试 的 影响 
下 面 分 别 从 三 个 方面 论述 面向 对 象 软 件 的 特点 及 其 对 软件 测试 的 影 


1. 面向 对 象 程序 执行 的 动态 性 
面向 对 象 软件 与 面向 过 程 软件 的 一 个 主要 区 别 在 于 ,面向 过 程 的 程序 鼓励 过 程 的 自 
治 , 但 不 鼓励 过 程 之 间 的 交互 ;面向 对 象 的 程序 则 不 鼓励 过 程 的 自治 ,并 且 将 过 程 (方法 ) 
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封装 在 类 中 ,而 类 的 对 象 的 执行 则 主要 体现 在 这 些 过 程 的 交互 上 。 

传统 程序 执行 的 路 径 是 在 程序 开发 时 定义 的 ,程序 执行 的 过 程 是 主动 的 ,其 程序 流程 
可 以 用 一 个 控制 流 图 从 头 至 尾 地 表示 ;而 面向 对 象 程序 中 方法 的 执行 通常 不 是 主动 的 , 程 
序 的 执行 路 径 也 是 在 运行 过 程 中 动态 地 确定 的 。 因 此 ,对 面向 对 象 软件 的 测试 应 主要 关 
注 其 动态 模型 。 这 也 使 得 面向 对 象 软件 的 集成 测试 不 可 能 再 沿用 传统 的 集成 策略 ,这 一 
点 将 在 面向 对 象 软件 的 集成 测试 中 进一步 前 述 。 


2. 封装 .继承 和 多 态 

面向 对 象 程序 设计 语言 提供 了 继承 .封装 、 多 态 等 机 制 ,这些 机 制 使 开发 出 高 质量 软 
件 成 为 可 能 ,但 同时 也 引入 了 新 的 测试 视角 ,对 面向 对 象 软件 需求 分 析 的 测试 .面向 对 象 
设计 的 测试 .面向 对 象 软件 的 单元 测试 及 集成 测试 都 提出 了 新 的 要 求 ,增加 了 面向 对 象 软 
件 测 试 的 复杂 性 。 

(1) 封装 对 测试 的 影响 

类 的 重要 特征 之 一 是 封装 性 , 它 把 数据 和 操作 数据 的 方法 封装 在 一 起 ,限制 对 象 属性 
对 外 的 可 见 性 和 外 界 对 它 的 操作 权限 。 封 装 简化 了 对 对 象 的 使 用 ,为 面向 对 象 软件 模块 
的 安全 性 提供 了 强 有 力 的 保障 ,并 减少 了 类 之 间 的 相互 依赖 性 ,提高 了 软件 部 件 的 可 重用 
性 ,使 得 对 软件 的 测试 .维护 等 工作 更 易于 进行 。 

但 封装 也 给 面向 对 象 软 件 测 试 带 来 了 新 的 问题 , 那 就 是 如 何 获取 对 象 的 状态 。 什 么 
是 对 象 的 状态 ? 简单 地 说 ,对 象 的 状态 就 是 类 中 成 员 变 量 的 值 。 

在 面向 对 象 系统 中 , 系统 的 基本 构造 模块 是 封装 了 数据 和 方法 的 类 和 对 象 。 每 个 对 
象 有 自己 的 生存 周期 , 有 自己 的 状态 。 对 象 的 功能 是 在 消息 的 触发 下 , 由 对 象 所 属 类 中 
定义 的 方法 与 相关 对 象 的 合作 共同 完成 。 也 就 是 说 ,面向 对 象 软 件 的 功能 从 宏观 上 看 是 
各 个 对 象 相 互 作用 的 结果 。 

当 对 象 执 行 某 方法 (成 员 函 数 ) 后 , 即 在 某 种 前 置 状 态 下 执行 某 函 数 ,对 象 的 状态 就 会 
发 生变 化 , 即 变 迁 到 后 置 状态 。 值 得 注意 的 是 ,对 象 的 状态 不 仅 与 执行 的 方法 有 关 , 还 与 
对 象 的 前 置 状 态 有 关 。 测 试 时 应 关注 对 象 状态 的 变迁 ,对 每 一 对 象 设 定 前 置 状 态 , 并 判断 
经 消息 触发 后 的 后 置 状 态 是 否 符合 预期 结果 。 即 在 输入 数据 部 分 给 成 员 变量 设 定 初始 
值 ,在 输出 部 分 判断 成 员 变量 的 结果 值 是 否 符合 预期 结果 。 

由 于 类 具有 封装 性 ,有 时 不 能 直接 通过 消息 接口 获取 对 象 的 状态 ,这 时 测试 人 员 必 须 
增添 完成 此 种 功能 的 函数 。 

例如 ,在 一 个 堆栈 类 Stack 中 ,其 成 员 变量 h 代表 了 栈 顶 的 高 度 。 当 堆栈 不 满 时 ,每 
执行 1 次 push(x),h 加 1; 当 堆栈 不 空 时 ,每 执行 1 次 pop(O),h 减 1。 但 h 是 私有 成 员 , 对 
外 界 不 可 见 , 如何 能 够 了 解 到 程序 执行 后 h 的 值 是 否 正确 地 得 到 了 改变 呢 ? 可 以 在 
Stack 类 中 添加 一 个 成 员 函 数 return h() ,用 于 返回 bh 的 值 ,这 样 便 能 观察 到 程序 的 执行 
结果 。 但 这 种 方法 增加 了 测试 的 工作 量 , 且 在 一 定 程度 上 破坏 了 类 的 封装 性 。 

(2) 继承 对 测试 的 影响 

在 面向 对 象 程序 中 ,继承 机 制 使 子 类 不 但 可 以 继承 父 类 的 特征 ,而 且 允 许 对 继承 的 特 
征 进 行 重 定义 。 继 承 机 制 使 得 类 的 层次 结构 更 加 分 明 , 继 承 是 提高 软件 可 重用 性 和 可 维 
护 性 的 重要 途径 。 但 继承 也 给 面向 对 象 的 软件 测试 带 来 了 新 的 研究 课题 。 
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Weyuker 曾经 提出 了 11 条 基于 程序 的 测试 数据 集 的 充分 性 公理 ,Perry 与 Kaiser 根 
据 Weyuker 公理 进行 了 讨论 ,得 出 与 继承 机 制 有 关 的 结论 如 下 : 

Q 在 子 类 中 重 定义 了 某 一 个 继承 的 方法 ,即使 两 个 函数 完成 了 相同 的 功能 , 重 定义 
的 方法 在 新 的 语 境 中 仍 需 重新 测试 。 

@ 在 多 继承 的 情况 下 ,从 两 个 不 同 的 父 类 所 定义 的 同名 (同型 构 ) 的 特征 中 按 不 同 
的 优先 级 (或 选择 方法 ) 在 子 类 中 仅 选择 保留 一 个 版 本 时 ,即使 新 得 到 的 子 类 的 结构 与 父 
类 相同 ,仍然 需要 不 同 的 测试 数据 集 。 

@ 若 对 父 类 中 某 一 方法 进行 了 重 定义 , 仅 对 该 方法 自身 或 其 所 在 类 进行 重新 测试 是 
不 够 的 ,还 必须 重新 测试 其 他 相关 的 类 ,例如 子 类 和 引用 类 。 

@ 彻底 复 用 的 继承 机 制 对 每 一 个 新 的 使 用 语 境 仍 需要 新 的 测试 。 也 就 是 说 , 若 一 个 
类 中 的 方法 被 其 子 类 继承 (未 重 定义 ) 后 ,在 子 类 的 环境 中 的 行为 特征 需要 重新 测试 。 

综 上 所 述 ,继承 并 未 简化 测试 问题 , 反而 会 使 测试 更 加 复杂 。 

(3) 多 态 对 测试 的 影响 

多 态 考 虑 的 是 类 与 类 之 间 的 层次 关系 ,以 及 类 自身 内 部 特定 成 员 函 数 之 间 的 关系 问 
题 ,是 解决 功能 和 行为 的 再 抽象 问题 。 多 态 是 指 类 中 具有 相似 功能 的 不 同 函 数 用 同一 个 
名 称 来 实现 ,从 而 可 以 使 用 相同 的 调用 方式 来 调用 这 些 具有 不 同 功能 的 同名 函数 。 比 如 
一 个 对 象 中 有 很 多 求 两 个 数 最 大 值 的 行为 ,虽然 可 以 针对 不 同 的 数据 类 型 , 写 很 多 不 同名 
称 的 函数 来 实现 ,但 它们 的 功能 几乎 完全 相同 ,因此 完全 可 以 利用 多 态 性 ,用 统一 的 标识 
来 完成 这 些 功 能 ,达到 类 的 行为 的 再 抽象 。 多 态 性 为 程序 员 编 程 提供 了 高 度 柔 性 .问题 抽 
象 和 易于 维护 等 特性 ,但 它 也 给 面向 对 象 软件 的 测试 带 来 了 新 的 问题 。 

例如 , 设 有 类 A、 类 B 和 类 C 三 个 类 ,类 也 继承 类 A, 类 C 又 继承 类 B; 成 员 郴 数 a() 
分 别 存在 于 这 三 个 类 中 ,但 在 每 个 类 中 的 具体 实现 不 同 ;同时 ,在 程序 中 存在 一 个 函数 
fn() ,该 函数 在 形 参 中 创建 了 一 个 类 A 的 实例 Ca. 并 在 函数 中 调用 了 方法 a()。 程 序 运 
行 时 相当 于 执行 了 一 个 分 情况 语句 Switch ,首先 判定 传递 过 来 的 实 参 类 型 (类 A 或 类 B 
或 类 C) ,然后 再 确定 究竟 执行 哪 一 个 类 中 的 方法 a()。 在 测试 时 必须 为 每 一 个 分 支 生成 
测试 用 例 ,以 覆盖 所 有 分 支 和 所 有 程序 代码 。 

从 这 个 例子 可 以 看 出 ,多 态 性 所 带 来 的 执行 路 径 的 不 确定 性 ,使 得 对 传统 的 面向 过 程 
软件 的 静态 分 析 方 法 不 再 适用 。 多 态 增 加 了 测试 用 例 选取 的 数量 和 难度 。 


3. 演化 .迭代 的 开发 模式 

面向 对 象 的 开发 往往 用 于 大 型 软件 项 目 , 需 求 变更 和 方案 变更 较 传 统 软件 开发 更 为 
频繁 。 此 外 ,基于 面向 对 象 方法 中 继承 .封装 等 机 制 所 提供 的 良好 保障 ,使 得 面向 对 象 软 
件 的 开发 模式 往往 是 演化 .迭代 的 ,因而 不 可 能 再 用 功能 细 化 的 观点 检测 面向 对 象 分析 和 
设计 的 结果 。 

综 上 所 述 ,传统 软件 的 测试 方法 和 技术 对 面向 对 象 软件 已 显得 力不从心 ,针对 面向 对 
象 软件 的 特点 ,应 该 有 一 套 完整 的 测试 方法 和 技术 。 
8.2.3 面向 对 象 软件 的 测试 模型 

面向 对 象 的 开发 模型 可 分 为 面向 对 象 分 析 (OOA) .面向 对 象 设计 (OOD) 和 面向 对 象 
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编程 (OOP) 三 个 阶段 。 

OOA 和 OOD 很 难 截然 区 分 开 来 ,从 OOA 过 渡 到 OOD 是 一 个 渐 增 式 过 程 ,它们 之 
间 的 微小 差别 可 这 样 理解 : OOA 是 一 个 分 类 的 过 程 , 它 从 问题 陈述 中 直接 反映 问题 域 和 
系统 行为 的 对 象 . 类 和 类 之 间 的 联系 孤立 出 来 ;而 OOD 则 进一步 说 明 为 实现 需求 必须 引 
入 的 其 他 类 和 对 象 ,还 应 考虑 对 类 结构 进行 改进 ,以 提高 软件 开发 的 质量 和 效率 。 此 外 ， 
OOD 还 应 提供 刻画 对 象 之 间 关 系 的 表示 方法 。 

至 于 OOP, 则 是 OOA 和 OOD 的 结果 代码 化 ,以 最 终 实 现 要 求 的 功能 。 

针对 这 种 开发 模型 ,结合 传统 的 测试 步骤 的 划分 ,可 将 面向 对 象 软件 的 测试 划分 
如 下 : 

。 面向 对 象 分 析 的 测试 。 

。 面向 对 象 设计 的 测试 。 

。 面向 对 象 编程 的 测试 。 

。 面向 对 象 软件 的 单元 测试 。 

。 面向 对 象 软件 的 集成 测试 。 

。 面向 对 象 软件 的 确认 和 系统 测试 。 

其 中 ,面向 对 象 分 析 的 测试 和 面向 对 象 设计 的 测试 是 对 分 析 和 设计 活动 的 测试 , 主 
要 针对 分 析 和 设计 产生 的 文档 进行 ,是 软件 开发 前 期 的 关键 性 测试 。 面 向 对 象 编程 的 
测试 主要 针对 代码 进行 测试 ,该 测试 往往 在 面向 对 象 单元 测试 和 面向 对 象 集成 测试 中 
实现 。 

面向 对 象 软件 的 单元 测试 .集成 测试 和 系统 测试 的 层次 是 怎样 划分 的 ? 与 传统 软件 
测试 的 划分 有 何不 同 ? 一 般 对 面向 对 象 软件 的 单元 测试 、 集 成 测试 和 系统 测试 进行 如 下 
界定 : 

(1) 面向 对 象 软件 的 单元 测试 即 类 级 测试 ,考查 封装 在 一 个 类 中 的 方法 和 数据 之 间 
的 相互 作用 。 值 得 注意 的 是 ,面向 对 象 软件 的 单元 测试 与 传统 的 单元 测试 有 很 大 的 不 同 ， 
传统 单元 测试 是 对 单个 功能 模块 (如 函数 ) 进 行 测试 ;而 在 面向 对 象 系统 中 ,基本 模 
块 一 一 类 不 仅 包含 若干 方法 ,还 包含 数据 。 对 象 中 的 数据 和 方法 是 一 个 有 机 的 整体 ,方法 
的 作用 在 于 改变 对 象 的 状态 ,而 对 象 的 状态 取决 于 类 中 成 员 变 量 的 值 ,因而 不 能 脱离 类 中 
的 数据 单独 对 方法 进行 测试 。 

(2) 面向 对 象 软件 的 集成 测试 可 以 理解 为 类 簇 级 测试 ,考查 一 组 协同 操作 的 类 之 间 
的 相互 作用 。 

(3) 面向 对 象 软件 的 系统 测试 与 传统 的 系统 测试 含义 基本 相同 ,考查 由 所 有 类 和 主 
程序 构成 的 整个 系统 能 否 满足 用 户 的 功能 性 需求 和 非 功 能 性 需求 。 

从 以 上 论述 可 以 看 出 ,由 于 面向 对 象 软件 与 面向 过 程 软件 完全 不 同 的 思维 方式 和 开 
发 模式 ,使 得 面向 对 象 软件 的 测试 的 视角 从 模块 转变 到 了 类 。 

由 于 面向 对 象 的 开发 往往 用 到 原型 开发 方法 .这 是 一 个 演化 式 开发 过 程 ,因而 软件 测 
试 的 HH 模型 对 面向 对 象 软件 是 适用 的 ,应 强调 将 测试 活动 作为 一 个 独立 的 流程 ,可 贯穿 
在 软件 开发 生命 周期 的 任何 一 个 阶段 .测试 应 是 可 迁 代 的 。 


有 
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面向 对 象 软件 的 测试 模型 如 图 8-1 所 示 。 

下 面 将 分 别 介绍 面向 对 象 分 析 的 测试 \ 面 西向 对 象 软件 的 系统 测试 
向 对 象 设计 的 测试 .面向 对 象 编程 的 测试 .面向 面向 对 象 软件 的 集成 测试 
对 象 软件 的 单元 测试 .面向 对 象 软件 的 集成 测 和 
试 和 面向 对 象 软件 的 系统 测试 。 的 单元 测试 

向 对 象 向 对 象 

1. 面向 对 象 分 析 的 测试 分 析 的 测试 | | 设计 的 测试 | 面向 对 象 编 

面向 过 程 的 分 析 方法 是 一 个 功能 分 解 的 过 程 的 测试 

将 一 ， 和 集 向 对 向 对 向 对 
程 , 将 一 个 软件 系统 看 成 可 以 分 解 的 功能 的 集 | ”而 向 对 加 向 对 咕 册 对 
合 。 这 种 传统 的 功能 分 解 分 析 法 的 着 眼 点 在 于 
一 个 系统 需要 什么 样 的 信息 处 理 方法 和 过 程 ， 图 8-1 面向 对 象 软件 的 测试 模型 


以 过 程 的 抽象 对 待 系统 的 需求 。 

而 OOA 不 仅 对 过 程 进行 抽象 ,更 重要 的 是 对 数据 进行 抽象 , 它 将 问题 空间 中 的 实例 
抽象 为 对 象 ,用 属性 和 操作 表示 实例 的 特性 和 行为 ,用 对 象 的 结构 反映 问题 空间 的 复杂 实 
例 及 实例 之 间 的 复杂 关系 。 对 一 个 软件 系统 而 言 ,与 传统 分 析 方法 产生 的 结果 相反 ,行为 
是 相对 稳定 的 ,结构 是 相对 不 稳定 的 ,这 更 充分 反映 了 现实 的 特性 ,也 使 得 面向 对 象 软 件 
对 需求 变更 的 适应 性 更 强 。 

实际 上 ,OOA 就 是 一 个 对 类 进行 划分 并 建立 类 结构 的 过 程 ,OOA 的 成 果 为 后 阶段 类 
的 进一步 选 定 和 实现 ,类 层次 结构 的 优化 和 实现 提供 了 平台 。 因 此 ,OOA 对 问题 空间 抽 
象 的 不 完整 ,将 会 导致 无 法 全 面 实现 软件 的 功能 ,导致 软件 开发 后 期 大 量 的 修补 工作 ;而 
一 些 匈 余 的 对 象 或 结构 会 带 来 不 必要 的 设计 和 编码 、 测 试 负担 。 因 而 ,对 OOA 的 测试 重 
点 在 其 完整 性 和 非 宛 余 性 。 

尽管 OOA 的 测试 是 一 个 不 可 分 割 的 系统 过 程 ,但 鉴于 Coad 方法 提出 的 OOA 的 实 
现 步骤 ,可 将 其 划分 为 对 认定 的 对 象 的 测试 ,对 认定 的 结构 的 测试 ,对 认定 的 主题 的 测试 、 
对 定义 的 属性 和 实例 关联 的 测试 和 对 定义 的 服务 和 消息 关联 的 测试 5 个 方面 。 

(1) 对 认定 的 对 象 的 测试 

OOA 中 认定 的 对 象 是 对 问题 空间 中 的 结构 ,其 他 系统 、 设 备 ,被 记忆 的 事件 ,系统 涉 
及 的 人 员 等 实例 的 抽象 。 对 它 的 测试 可 以 从 如 下 方面 考虑 : 

@ 认定 的 对 象 是 否 全 面 ,是 否 问 题 空间 中 所 有 涉及 的 实例 都 反映 在 认定 的 抽象 对 象 中 。 

G@ 认定 的 对 象 是 否 具有 多 个 属性 。 只 有 一 个 属性 的 对 象 通常 应 看 成 其 他 对 象 的 属 
性 ,而 不 被 抽象 为 独立 的 对 象 。 

@ 对 认定 为 同一 对 象 的 实例 是 否 有 共同 的 .区 别 于 其 他 实例 的 属性 。 

@ 对 认定 为 同一 对 象 的 实例 是 否 提供 或 需要 相同 的 服务 ,如 果 服 务 随 着 不 同 的 实例 
而 变化 ,认定 的 对 象 就 需要 分 解 或 利用 继承 性 来 分 类 表示 。 

@ 如 果 系 统 没有 必要 始终 保持 对 象 代表 的 实例 的 信息 ,提供 或 者 得 到 关于 它 的 服 
务 , 认 定 的 对 象 则 无 必要 。 

@ 认定 的 对 象 名 称 应 该 尽量 准确 .适用 。 

(2) 对 认定 的 结构 的 测试 

在 Coad 方法 中 ,认定 的 结构 指 的 是 多 种 对 象 的 组 织 方式 ,用 来 反映 问题 空间 中 的 复 
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杂 实例 和 复杂 关系 。 认 定 的 结构 分 为 两 种 : 分 类 结构 和 组 装 结构 。 分 类 结构 体现 了 问题 
空间 中 实例 间 一 般 与 特殊 的 关系 ;组 装 结 构 ( 即 聚集 ) 则 体现 了 问题 空间 的 实例 间 整 体 与 
局 部 的 关系 。 

对 认定 的 分 类 结构 的 测试 可 从 如 下 方面 着 手 : 

@ 对 于 结构 中 的 一 种 对 象 ,尤其 是 处 于 高 层 的 对 象 ,是 否 在 问题 空间 中 含有 不 同 于 
下 一 层 对 象 的 特殊 可 能 性 , 即 是 否 能 派生 出 下 一 层 对 象 。 

@ 对 于 结构 中 的 一 种 对 象 ,尤其 是 处 于 同一 低层 的 对 象 ,是 否 能 抽象 出 在 现实 中 有 
意义 的 更 一 般 的 上 层 对 象 。 

@ 对 所 有 认定 的 对 象 ,是 否 能 在 问题 空间 内 向 上 层 抽象 出 在 现实 中 有 意义 的 对 象 。 

@ 高 层 对 象 能 否 完全 体现 低层 对 象 的 共性 。 

@ 低层 对 象 是 否 有 高 层 对 象 共性 基础 上 的 特殊 性 。 

对 认定 的 组 装 结构 的 测试 从 如 下 方面 人手: 

Q@ 整体 (对 象 ) 与 部 件 (对 象 ) 的 组 装 关系 是 否 符合 现实 的 关系 。 

@ 整体 (对 象 ) 的 部 件 ( 对 象 ) 是 否 在 考虑 的 问题 空间 中 有 实际 应 用 价值 。 

@ 整体 (对 象 ) 中 是 否 遗 漏 了 反映 在 问题 空间 中 有 用 的 部 件 ( 对 象 ) 。 

@ 部 件 ( 对 象 ) 能 否 在 问题 空间 中 组 装 新 的 有 现实 意义 的 整体 (对 象 )。 

(3) 对 认定 的 主题 的 测试 

主题 是 在 对 象 和 结构 的 基础 上 更 高 一 层 的 抽象 ,是 为 了 提供 OOA 结果 的 可 见 性 而 
引入 的 ,就 如 同文 章 中 各 部 分 内 容 的 概要 。 对 主题 的 测试 应 该 考虑 以 下 方面 ; 

@ 贯彻 George Miller 的 “7 十 2" 原 则 ,如 果 主 题 个 数 超过 7 个 ,就 要 求 对 属性 和 服务 
联系 较 紧 密 的 主题 进行 归并 。 

@ 主题 所 反映 的 一 组 对 象 和 结构 是 否 具有 相同 和 相近 的 属性 和 服务 。 

@ 认定 的 主题 是 否 是 对 象 和 结构 更 高 层 的 抽象 ,是 否 便于 理解 OOA 结果 的 概貌 (万 
其 是 对 非 技 术 人 员 的 用 户 )。 

@ 主题 间 的 消息 联系 (抽象 ) 是 否 代表 了 主题 所 反映 的 对 象 与 结构 之 间 的 所 有 关联 。 

(4) 对 定义 的 属性 和 实例 关联 的 测试 

属性 是 用 来 描述 对 象 或 结构 所 反映 的 实例 的 特性 ,实例 关联 则 是 反映 实例 集合 间 的 
映射 关系 。 对 属性 和 实例 关联 的 测试 应 从 如 下 方面 考虑 : 

9 定义 的 属性 是 否 对 相应 的 对 象 和 分 类 结构 的 每 个 现实 实例 都 适用 。 

G@ 定义 的 属性 在 现实 世界 是 否 与 这 种 实例 关系 密切 。 

加 定义 的 属性 在 问题 空间 是 否 与 这 种 实例 关系 密切 。 

@ 定义 的 属性 是 否 能 够 不 依赖 于 其 他 属性 而 被 独立 地 理解 。 

@ 定义 的 属性 在 分 类 结构 中 的 位 置 是 否 恰当 ,低层 对 象 的 共有 属性 是 否 在 上 层 对 象 
属性 中 体现 。 

@ 在 问题 空间 中 每 个 对 象 的 属性 是 否定 义 完整 。 

@ 定义 的 实例 关联 是 否 符合 现实 。 

在 问题 空间 中 实例 关联 是 否定 义 完 整 ,特别 需要 注意 一 对 多 和 多 对 多 的 实例 
关联 。 
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(5) 对 定义 的 服务 和 消息 关联 的 测试 

定义 的 服务 ,就 是 定义 的 每 一 种 对 象 和 结构 在 问题 空间 所 要 求 的 行为 。 由 于 问题 空 
间 中 实例 间 必 要 的 通信 ,在 OOA 中 需要 定义 相应 的 消息 关联 。 对 定义 的 服务 和 消息 关 
联 的 测试 应 从 如 下 方面 进行 : 

@ 对 象 和 结构 在 问题 空间 的 不 同 状态 是 否定 义 了 相应 的 服务 。 

@ 对 象 或 结构 所 需要 的 服务 是 否 都 定义 了 相应 的 消息 关联 。 

@@ 定义 的 消息 关联 所 指引 的 服务 提供 是 否 正确 。 

@ 沿 着 消息 关联 执行 的 线程 是 否 合理 ,是 否 符合 现实 过 程 。 

@@ 定义 的 服务 是 否 重 复 , 是 否定 义 了 能 够 得 到 的 服务 。 

2. 面向 对 象 设计 的 测试 

OOD 在 OOA 的 基础 上 进一步 引入 了 一 些 类 ,并 对 类 结构 进行 了 优化 或 进一步 构造 
成 类 库 ,实现 了 对 问题 空间 的 进一步 抽象 。 

OOD 与 OOA 的 界限 往往 难以 严格 区 分 。OOD 是 在 OOA 的 基础 上 进一步 优化 和 
更 高 层 的 抽象 。OOD 确定 的 类 和 类 结构 不 仅 是 满足 当前 需求 分 析 的 要 求 ,更 重要 的 是 通 
过 重新 组 合 或 加 以 适当 的 补充 ,消除 需求 分 析 结 果 中 的 宛 余 部 分 ,并 能 方便 地 实现 功能 的 
重用 和 扩展 ,以 不 断 适 应 用 户 的 需求 。 

对 OOD 的 测试 ,可 从 如 下 三 方面 考虑 : 

Q@ 对 认定 的 类 的 测试 。 

@ 对 构造 的 类 层次 结构 的 测试 。 

@ 对 类 库 的 支持 的 测试 。 

(1) 对 认定 的 类 的 测试 

OOD 认定 的 类 可 以 是 OOA 中 认定 的 对 象 ,也 可 以 是 对 象 所 需要 的 服务 的 抽象 ,以 
及 对 象 所 具有 的 属性 的 抽象 。 认 定 的 类 原则 上 应 该 尽量 具有 基础 性 ,以 便于 重用 和 维护 。 
可 从 如 下 方面 测试 认定 的 类 

Q@ 是 否 包含 了 OOA 中 所 有 认定 的 对 象 。 

@ 是 否 能 体现 OOA 中 定义 的 属性 。 

@ 是 否 能 实现 OOA 中 定义 的 服务 。 

@ 是 否 对 应 着 一 个 含义 明确 的 数据 抽象 。 

@ 是 否 尽 可 能 少 地 依赖 其 他 类 。 

@ 类 中 的 服务 是 否 为 单 用 途 的 。 

(2) 对 构造 的 类 层次 结构 的 测试 

OOD 应 对 OOA 阶段 产生 的 类 层次 结构 进行 优化 。 在 当前 的 问题 空间 ,对 类 层次 结 
构 的 主要 要 求 是 能 在 解 空间 构造 实现 全 部 功能 的 结构 框架 。 为 此 ,可 从 如 下 方面 对 构造 
的 类 层次 结构 进行 测试 : 

Q@ 类 层次 结构 是 否 涵盖 了 所 有 定义 的 类 。 

@ 是 否 能 体现 OOA 中 所 定义 的 实例 关联 。 

@ 是 否 能 实现 OOA 中 所 定义 的 消息 关联 。 
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@ 子 类 是 否 具有 父 类 没有 的 新 特性 。 

GO 子 类 间 的 共同 特性 是 否 完全 在 父 类 中 得 以 体现 。 

(3) 对 类 库 支 持 的 测试 

对 类 库 的 支持 虽然 也 属于 类 层次 结构 的 组 织 问题 ,但 它 强 调 的 是 软件 部 件 的 重用 性 。 
由 于 它 并 不 直接 影响 当前 软件 的 开发 和 功能 实现 ,因此 ,将 它 单独 提取 出 来 测试 ,也 可 作 
为 对 高 质量 类 层次 结构 的 评估 。 可 从 如 下 方面 进行 测试 

g@ 一 组 子 类 中 关于 某 种 含义 相同 或 基本 相同 的 服务 ,是否 有 相同 的 接口 。 

@ 类 中 服务 的 功能 是 否 较 单纯 ,相应 的 代码 行 是 否 较 少 (建议 不 超过 30 行 ) 。 

@ 类 的 层次 结构 是 否 是 深度 大 、 宽 度 小 的 。 


3. 面向 对 象 编程 的 测试 
面向 对 象 编程 的 测试 主要 是 通过 面向 对 象 软件 的 单元 测试 和 面向 对 象 软件 的 集成 测 
试 完成 的 , 故 在 此 不 单独 介绍 。 


4. 面向 对 象 软件 的 单元 测试 

面向 对 象 软件 的 单元 测试 即 对 面向 对 象 软件 中 的 基本 模块 一 一 类 进行 测试 。 类 是 对 
若干 方法 和 数据 进行 封装 后 形成 的 模块 ,如 前 所 述 , 一 个 类 对 象 有 它 自己 的 状态 和 依赖 于 
状态 的 操作 行为 ,该 行为 会 使 对 象 从 现 有 状态 变迁 到 其 他 状态 。 由 于 要 关注 对 象 的 状态 ， 
面向 对 象 软件 的 单元 测试 不 能 脱离 类 中 的 数据 仅 对 方法 进行 测试 ,因而 与 传统 软件 的 单 
元 测试 不 同 ,面向 对 象 软 件 的 最 小 可 测试 单元 不 是 单个 方法 ,而 是 类 或 对 象 。 

面向 对 象 软 件 的 类 测试 是 由 封装 在 类 中 的 操作 (方法 ) 和 类 的 状态 行为 所 驱动 的 。 类 
测试 将 对 象 与 其 状态 结合 起 来 ,考查 封装 在 一 个 类 中 的 方法 和 数据 之 间 的 相互 作用 ,对 对 
象 的 状态 行为 进行 测试 。 

类 测试 是 面向 对 象 软件 测试 发 现 错误 的 强 有 力 的 手段 ,类 测试 一 般 由 编程 人 员 完 成 。 

类 测试 关注 的 内 容 主要 如 下 : 

Q@ 对 类 中 单个 方法 的 测试 。 测 试 类 中 的 单个 方法 ,能 否 在 消息 的 触发 下 实现 正确 的 
状态 转移 , 即 从 现 有 状态 变迁 到 预期 的 状态 。 

@ 对 类 中 方法 间 协 作 的 测试 在 保证 单个 方法 正确 的 基础 上 ,还 应 该 测试 方法 之 间 的 
协作 关系 , 即 测试 类 中 的 方法 是 否 能 够 通过 对 象 的 状态 正确 地 通信 。 

传统 针对 模块 的 测试 用 例 设计 技术 ,如 逻辑 覆盖 、 等 价 类 划分 .边界 值 分 析 和 错误 推 
测 等 方法 ,仍然 可 以 视 情 况 作 为 测试 类 中 方法 的 技术 ,但 由 于 类 和 传统 的 模块 不 一 样 的 特 
点 ,仅仅 依靠 这 些 方 法 ,是 不 能 有 效 地 完成 类 测试 的 。 以 下 介绍 目前 作为 应 用 或 研究 热点 
的 一 些 典 型 的 类 测试 方法 。 

(1) 基于 状态 的 类 测试 

基于 状态 的 测试 把 被 测 对 象 看 作 一 个 有 限 的 状态 机 (FSM) ,从 该 FSM 导出 测试 用 
例 。 选 择 测试 用 例 时 可 以 利用 基于 FSM 的 测试 所 取得 的 研究 成 果 。 

基于 状态 的 类 测试 方法 的 基本 思想 是 ,检查 对 象 的 状态 在 执行 某 个 方法 或 方法 序列 
后 是 否 会 转移 到 预期 的 状态 ;如 果 对 象 到 达 的 状态 不 是 预期 的 状态 , 则 说 明 程 序 中 含有 错 
误 。 这 里 的 “状态 ”有 两 种 定义 方式 : 设计 状态 和 实现 状态 。 它 们 分 别 对 应 于 分 析 / 设 计 
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阶段 和 实现 阶段 所 用 的 概念 。 实 现状 态 是 指 在 实现 层次 由 对 象 的 属性 值 确定 的 状态 ; 设 
计 状 态 是 指 建 模 阶段 所 认定 的 状态 ,处 于 较 高 的 抽象 层次 ,而 不 依赖 于 实现 时 的 具体 表 
示 。 设 计 状态 在 有 些 文献 中 称 为 逻辑 状态 或 抽象 状态 。 基 于 状态 的 测试 方法 最 早 由 
Turner 和 Robson 给 出 。 该 方法 使 用 的 是 实现 状态 ,通过 跟踪 监视 对 象 数据 成 员 的 值 的 
变化 检验 类 中 方法 的 执行 是 否 正确 。 另 一 个 有 代表 性 的 基于 状态 的 测试 方法 是 
McGregor 给 出 的 方法 。 该 测试 方法 使 用 的 是 设计 状态 ,一 个 “状态 ”被 定义 为 属性 值 集 
合 上 的 一 个 约束 ,这 些 约束 互 不 相交 。 这 种 定义 方式 比 Turner 和 Robson 方法 的 状态 定 
义 更 抽象 ,并 且 允 许 以 子 类 型 兼容 的 方式 定义 状态 。 

基于 状态 的 测试 可 以 充分 测试 类 中 的 各 种 方法 和 可 能 的 状态 ,符合 类 测试 的 特点 , 因 
此 是 当前 类 测试 中 用 得 较 多 、 研 究 得 也 较 多 的 技术 之 一 ,但 其 难点 主要 在 于 如 何 确定 被 测 
对 象 是 否 达到 了 正确 的 状态 。 

许多 状态 机 测试 方法 (如 UIO 方法 等 ) ,都 是 为 每 一 个 状态 确定 一 个 能 够 将 它 与 其 他 
状态 相 区 别 的 迁移 集 或 迁移 序列 ,根据 这 些 迁 移 上 的 消息 及 响应 序列 识别 该 状态 ,但 这 些 
方法 往往 较为 复杂 ,并 且 经 常 难以 奏效 ;另外 ,对 于 比较 复杂 的 类 ,往往 会 产生 状态 爆炸 的 
问题 ,问题 的 解决 还 有 待 进一步 研究 。 

基于 状态 的 测试 可 以 很 容易 地 推广 到 集成 测试 ,只 要 能 够 为 类 簇 ( 即 具有 协作 关系 的 
一 组 类 ) 建 立 这 样 的 状态 模型 。 

(2) 基于 UML 的 类 测试 

可 用 于 面向 对 象 软件 单元 测试 即 类 测试 阶段 的 UML 图 形 主 要 有 类 图 和 状态 图 。 

类 图 对 图 中 类 的 属性 和 方法 进行 了 列举 说 明 , 标 识 了 类 之 间 的 关系 ,显然 可 作为 类 测 
试 的 重要 依据 。 

状态 图 用 来 描述 一 个 特定 对 象 的 所 有 可 能 状态 及 引起 状态 转移 的 事件 ,可 表示 单个 
对 象 在 其 生命 周期 中 全 部 行为 的 事件 顺序 ,因而 它 对 类 测试 有 着 重要 的 意义 。 

基于 状态 图 的 类 测试 着 眼 于 检测 对 象 成 员 函 数 之 间 通 过 对 象 状态 交互 时 产生 的 错 
误 , 即 检查 对 象 在 现 有 状态 下 ,执行 某 个 方法 后 能 否 转 移 到 预期 的 状态 。 使 用 该 技术 能 够 
检验 类 中 的 方法 是 否 能 通过 对 象 的 状态 正确 地 通信 。 

因为 对 象 的 状态 是 通过 对 象 的 数据 成 员 值 反 映 出 来 的 ,所 以 检查 对 象 的 状态 实际 上 
就 是 跟踪 监视 对 象 数据 成 员 值 的 变化 。 

基于 状态 图 的 类 测试 ,根据 构造 函数 的 规格 说 明 设 计 测试 用 例 , 测 试 构 造 函 数 是 否 能 
正确 设置 对 象 的 初始 状态 ;还 应 着 重 检 测 对 象 对 事件 (消息 ) 响 应 的 正确 性 , 即 对 于 对 象 所 
有 可 能 接受 的 事件 ,根据 对 象 状 态 图 设计 测试 用 例 , 测 试 处 于 某 一 状态 的 对 象 对 特定 事件 
是 否 能 正确 地 响应 ,并 转移 到 预期 的 状态 。 

状态 图 展现 了 一 个 状态 机 ,所 以 很 多 已 有 的 对 于 状态 机 测试 的 有 效 方 法 都 能 很 容易 
地 被 移植 到 基于 状态 图 的 测试 中 去 。 

(3) 基于 数据 流 的 类 测试 

基于 数据 流 的 类 测试 由 传统 的 数据 流 测试 发 展 而 来 。 传 统 数据 流 测试 的 基本 思想 
是 ,一 个 变量 的 定义 ,通过 轧 转 的 使 用 和 定义 ,可 以 影响 到 另 一 个 变量 的 值 ,或 者 影响 到 路 
径 的 选择 等 ,因此 可 以 选择 一 定 的 测试 数据 ,使 程序 按照 一 定 的 变量 的 定义 一 一 使 用 路 径 
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执行 ,并 检查 执行 结果 是 否 与 预期 的 相符 ,从 而 发 现代 码 的 错误 。 这 种 测试 思想 也 适用 于 
面向 对 象 的 软件 。 但 在 类 级 和 类 簇 级 测试 中 ,由 于 方法 执行 的 先后 顺序 是 动态 决定 的 , 因 
此 必须 首先 得 到 类 或 类 簇 中 正确 的 方法 序列 ,测试 用 例 则 围绕 这 些 方 法 序列 中 的 类 成 员 
变量 的 定义 一 一 使 用 对 产生 。 为 一 个 类 或 类 簇生 成 的 测试 用 例 集 应 能 覆盖 该 类 或 类 簇 中 
所 有 类 成 员 变 量 的 定义 一 一 使 用 对 。 该 方法 主要 着 眼 于 类 或 类 簇 中 的 数据 流 , 一 般 对 其 
襄 贬 不 一 ,有 人 认为 这 种 测试 是 必 不 可 少 的 ,也 有 人 认为 这 种 方法 破坏 了 类 的 封装 性 ,不 
值得 提倡。 

(4) 基于 规范 的 类 测试 

基于 规范 的 面向 对 象 的 测试 技术 ,是 指 以 需求 和 功能 规范 为 基础 的 测试 ,通过 分 析 软 
件 的 需求 和 功能 规范 选择 和 产生 测试 数据 ,重点 测试 一 个 作用 于 被 测 类 的 对 象 的 消息 序 
列 是 否 将 该 对 象 置 于 “正确 ”的 状态 。Doong 和 Frankl 提出 的 ASTOOT 方法 是 一 种 非 
常 有 代表 性 的 基于 形式 规范 的 测试 方法 。ASTOOT 方法 基于 ADT 的 代数 规范 ,使 测试 
结果 的 判断 归结 为 布尔 值 的 比较 ,简化 了 测试 先知 问题 ,同时 测试 过 程 的 自动 化 程度 显著 
提高 。 对 ASTOOT 方法 在 此 不 详细 介绍 ,读者 可 参考 相关 资料 。 

由 于 形式 规范 具有 的 严格 ,精确 并 支持 机 械 推 导 的 特点 ,形式 规范 与 测试 的 结合 是 面 
向 对 象 测试 技术 的 重要 发 展 方向 。 

(5) 基于 方法 序列 的 类 测试 

面向 对 象 程序 中 方法 的 调用 是 有 一 定 顺 序 的 ,如 果 违 反 了 这 个 顺序 就 会 产生 错误 。 
Kirani 提出 了 一 种 方法 序列 规范 (Method Sequence Specification, MtSS), 方 法 序列 规范 
MtSS 规定 了 类 或 类 簇 中 方法 的 执行 顺序 ,如 哪些 方法 必须 按 先后 次 序 执行 ,哪些 方法 可 
以 并 发 执行 等 。MtSS 能 直接 支持 测试 用 例 的 生成 ,从 MtSS 产生 的 方法 序列 (或 消息 序 
列 ) 可 作为 一 个 测试 用 例 用 于 类 测试 或 集成 测试 ,检验 这 些 类 或 类 簇 中 的 方法 是 否 能 够 正 
确 地 交互 。 

由 于 该 方法 没有 能 够 考虑 类 的 状态 ,因此 采用 它 进 行 的 测试 是 不 完全 的 。 这 种 方法 
常常 与 其 他 测试 方法 结合 使 用 。 

5. 面向 对 象 软件 的 集成 测试 

面向 对 象 的 集成 测试 主要 检测 那些 类 相互 作用 时 才 会 产生 的 错误 。 基 于 单元 测试 对 
成 员 函 数 行为 正确 性 的 保证 ,集成 测试 只 关注 系统 的 结构 和 内 部 的 相互 作用 。 

面向 对 象 软件 的 集成 测试 可 以 分 两 步 进行 ,先进 行 静态 测试 ,再 进行 动态 测试 。 

静态 测试 主要 针对 程序 的 结构 进行 ,检测 程序 结构 是 否 符合 设计 要 求 。 现 在 流行 的 
一 些 测 试 软件 都 能 提供 一 种 称 为 可逆 性 工程 ”的 功能 , 即 通过 原 程 序 得 到 类 关系 图 和 函 
数 功能 调用 关系 图 ,例如 Rational 公司 的 Rose C++ Analyzer 等 ,将 可 逆 性 工程 得 到 的 
结果 与 OOD 的 结果 相 比 较 , 检 测 程序 结构 和 实现 上 是 否 存 在 缺陷 , 即 检 测 OOP 是 否 符 
合 预期 的 设计 要 求 。 

面向 对 象 软件 集成 测试 的 动态 测试 是 软件 测试 的 一 大 难点 和 研究 热点 ,原因 在 于 它 
与 传统 软件 集成 测试 策略 存在 很 大 的 不 同 。 

面向 对 象 程序 的 执行 实际 上 是 执行 一 个 由 消息 连接 起 来 的 方法 序列 ,而 这 个 方法 序 
列 往往 是 由 外 部 事件 驱动 的 。 即 面向 对 象 软件 没有 层次 控制 结构 ,针对 传统 软件 的 自 底 
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向 上 或 自 顶 向 下 的 集成 测试 策略 并 不 适用 于 面向 对 象 软件 。 此 外 ,在 各 个 方法 测试 之 后 ， 
每 次 选择 一 个 方法 集成 到 类 中 逐步 进行 测试 通常 也 是 不 可 行 的 ,这 是 因为 各 个 方法 之 间 
往往 存在 错综复杂 的 交互 。 因 此 ,需要 研究 专门 针对 面向 对 象 软件 的 集成 测试 策略 ( 指 动 
态 的 集成 测试 ,以 下 同 )。 

集成 测试 有 时 也 被 称 为 类 入 测试。 所 谓 类 簇 (Cluster) ,是 一 组 具有 协作 关系 的 类 。 
集成 测试 (类 簇 测试 ) 主 要 根据 系统 中 相关 类 的 层次 关系 ,考查 一 组 协同 操作 的 类 之 间 相 
互 作用 的 正确 性 。 即 检查 各 相关 类 之 间 消 息 连接 的 合法 性 ,继承 机 制 的 正确 性 ,动态 绑 定 
执行 的 正确 性 ,类 簇 协同 完成 系统 功能 的 正确 性 等 。 

面向 对 象 软件 的 集成 测试 方法 主要 如 下 。 

(1) 基于 UML 的 集成 测试 。 统 一 建 模 语言 UML 中 的 若干 图 形 也 可 以 作为 面向 对 
象 集 成 测试 的 用 例 设计 依据 。 在 此 主要 介绍 基于 类 图 和 顺序 图 的 集成 测试 。 

@ 基于 类 图 的 集成 测试 。 类 图 说 明了 各 对 象 类 本 身 的 组 成 , 即 类 的 属性 和 操作 , 描 
述 了 类 之 间 继 承 、 聚 集 、 关 联 等 静态 关系 。 

根据 类 图 中 所 描述 的 父 类 、 子 类 的 层次 结构 ,将 存在 继承 关系 的 类 作为 一 个 整体 实施 
类 簇 测试 ,检查 子 类 的 继承 特性 与 父 类 的 一 致 性 和 动态 绑 定 的 正确 性 。 其 自然 的 测试 顺 
序 是 父 类 在 先 , 子 类 在 后 。 父 类 可 看 作 子 类 的 公共 部 分 ,在 父 类 经 充分 测试 的 前 提 下 , 子 
类 测试 应 重点 关注 子 类 的 独 有 部 分 以 及 父 类 和 子 类 间 的 交互 。 

@ 基于 聚集 关系 的 集成 测试 。 聚 集 即 反映 类 之 间 整 体 与 部 分 的 关系 ,可 进一步 划分 
成 共享 聚集 (Shared Aggregation) 和 组 成 (Composition) 。 共 享 聚集 的 含义 是 部 分 可 属于 
多 个 整体 ,如 学 生 类 和 社团 类 之 间 的 关系 ;组 成 的 含义 是 部 分 只 能 依附 于 一 个 整体 , 若 整 
体 消失 了 , 则 部 分 也 不 复 存在 ,例如 某 窗口 的 显示 区 域 与 该 窗口 的 关系 。 

基于 聚集 关系 的 集成 测试 ,其 自然 的 测试 顺序 是 部 分 类 在 先 ,整体 类 在 后 ;在 部 分 类 
经 充分 测试 的 基础 上 ,测试 整体 类 是 否 能 按 设 计 要 求实 现 聚 合 。 

另外 ,还 可 利用 类 图 中 的 关联 关系 生成 检验 类 之 间 关 系 是 否 正确 实现 了 测试 用 例 。 

@ 基于 顺序 图 的 集成 测试 。 顺 序 图 描述 对 象 之 间 动 态 的 交互 关系 ,着 重 体现 对 象 间 
消息 传递 的 时 间 顺 序 , 因 此 它 可 以 作为 面向 对 象 软件 集成 测试 的 依据 。 顺 序 图 可 以 转换 
为 流程 图 ,这 种 流程 图 表示 了 对 象 间 消息 传递 的 顺序 ,与 程序 流程 图 在 形式 上 极为 类 似 ， 
也 包括 了 顺序 .分支 和 循环 等 。 采 用 基本 路 径 法 可 导出 流程 图 的 基本 路 径 集 ,路 径 集中 的 
每 一 条 路 径 都 是 一 个 消息 序列 , 即 测试 用 例 。 

(2) 基于 数据 流 的 集成 测试 

前 面 介绍 过 的 基于 数据 流 的 类 测试 策略 同样 很 容易 扩展 到 面向 对 象 软件 的 集成 测试 
中 来 。 

(3) 基于 方法 序列 的 集成 测试 

基于 方法 序列 的 集成 测试 即 基于 方法 序列 规范 MtSS 的 集成 测试 。 前 面 已 介绍 过 的 
基于 方法 序列 的 类 测试 策略 同样 可 用 于 面向 对 象 软件 的 集成 测试 。 

在 使 用 以 上 介绍 的 某 种 集成 测试 方法 时 ,应 注意 如 下 几 点 : 

(1) 确定 不 需要 重复 测试 的 部 分 ,从 而 精 化 测试 用 例 ,减少 测试 工作 量 。 
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(2) 应 注意 使 测试 达到 一 定 的 覆盖 标准 。 测 试 所 要 达到 的 覆盖 标准 可 以 是 : 对 所 有 
服务 的 一 定 覆 盖 率 ,依据 类 间 传 递 的 消息 达到 对 所 有 执行 线程 的 一 定 覆 盖 率 ,对 所 有 状态 
的 一 定 覆 盖 率 等 ,同时 也 可 以 考虑 使 用 现 有 的 测试 工具 得 到 对 程序 代码 的 覆盖 率 。 

(3) 设计 测试 用 例 时 ,不 但 要 设计 满足 预期 功能 的 输入 ,还 应 该 有 意识 地 设计 一 些 被 
禁止 的 例子 ,确认 类 能 否 恰当 地 处 理 这 类 输入 ,例如 发 送 与 类 状态 不 相 适 应 的 消息 ,与 要 
求 不 相 适 应 的 服务 等 。 

(4) 动态 的 集成 测试 有 时 也 可 以 通过 系统 测试 完成 。 


6. 面向 对 象 软件 的 系统 测试 

为 最 后 确认 开发 完毕 的 整个 软件 产品 在 实际 运行 环境 下 能 否 满足 用 户 的 全 部 需求 ， 
即 能 否 实现 需求 规格 说 明 书 中 指定 的 功能 指标 和 满足 性 能 、 可 靠 性 、 安 全 性 等 非 功 能 性 指 
标 , 必 须 对 软件 产品 进行 严格 ,规范 的 系统 测试 ;测试 开发 的 软件 作为 最 终 系统 的 一 个 组 
成 元 素 ,与 系统 其 他 元 素 能 否 很 好 地 协作 运行 ,以 满足 用 户 需 求 。 

与 传统 软件 的 系统 测试 相似 ,面向 对 象 的 系统 测试 不 再 考虑 各 模块 之 间 相 互 连 接 的 
细节 ,集中 检查 用 户 可 见 的 动作 和 可 识别 的 输出 , 即 验 证 软件 系统 确实 实现 了 用 户 的 

系统 测试 的 具体 测试 内 容 也 与 传统 软件 的 系统 测试 内 容 相似 ,主要 包括 功能 测试 . 压 
力 测试 和 负载 测试 .强度 测试 .容量 测试 .安全 性 测试 ,健壮 性 测试 .可 靠 性 测试 .配置 测试 
和 鳞 容 性 测试 .用户 界面 测试 ,文档 测试 .安装 测试 .卸载 测试 等 。 

系统 测试 应 该 尽量 搭建 与 用 户 实际 使 用 环境 相同 的 测试 平台 ,应 该 保证 被 测 系统 的 
完整 性 ,对 没有 的 系统 设备 部 件 , 也 应 有 相应 的 模拟 手段 。 

系统 测试 需要 对 被 测 的 软件 结合 需求 分 析 进 行 仔细 的 测试 分 析 , 建 立 测试 用 例 。 如 
以 UML 中 的 用 例 图 为 依据 ,对 用 例 图 进行 逐 层 细 化 ,以 导出 测试 用 例 。 从 用 例 图 导出 测 
试用 例 的 主要 步骤 如 下 : 

名 标识 出 系统 的 功能 。 软 件 系 统 的 功能 是 整个 系统 测试 的 基础 ,也 是 系统 测试 的 出 发 
点 。 如 果 这 一 阶段 还 不 能 准确 描述 ,那么 该 系统 的 开发 将 很 难 取得 成 功 , 更 不 用 说 测试 了 。 

@ 建立 高 层 用 例 图 。 用 例 开 发 从 很 高 层次 的 视图 开始 。 高 层 用 例 关 注 于 待 建 系统 
的 总 的 描述 。 

@ 建立 基本 用 例 图 。 高 层 用例 只 是 对 系统 的 总 的 描述 ,很 少 涉及 细节 。 因 此 必须 对 
其 进行 不 断 的 精 化 。 

@ 扩展 基本 用 例 图 。 如 果 该 系统 的 功能 相对 较 复杂 ,在 基本 用 例 中 还 没有 完全 描述 
清楚 其 功能 ,可 以 对 基本 用 例 进一步 细 化 ,进行 扩展 。 

名 根据 基本 用 例 的 描述 ,导出 系统 测试 用 例 ,完成 系统 测试 。 当 然 , 为 了 更 好 地 完成 
系统 测试 工作 ,可 以 考虑 在 不 同 的 覆盖 范围 内 ,对 系统 进行 测试 。 


8.3 小 结 


本 章 介 绍 了 与 面向 对 象 软 件 测试 相关 的 内 容 。 主 要 包括 面向 对 象 开发 方法 的 概念 、 
优点 ,面向 对 象 软件 测试 的 重要 性 ,面向 对 象 软 件 的 特点 对 测试 的 影响 ,面向 对 象 的 软件 
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测试 模型 等 。 


在 面向 对 象 测 试 模型 中 介绍 的 面向 对 象 单 元 测试 和 面向 对 象 集成 测试 是 本 章 最 重要 


的 部 分 。 应 重点 掌握 面向 对 象 单元 测试 及 集成 测试 的 概念 和 策略 。 


习 


oo 悦 口 思 上 mo 一 


题 


. 结合 面向 对 象 开发 的 若干 机 制 , 试 谈 谈 面向 对 象 开发 方法 的 优点 。 

. 试 谈 谈 面向 对 象 软件 的 特点 及 其 对 软件 测试 的 影响 。 

.面向 对 象 软件 的 测试 模型 主要 包括 哪儿 种 测试 ? 它们 的 执行 顺序 如 何 ? 
.对 面向 对 象 分 析 的 测试 重点 是 什么 ? 

. 为 什么 说 面向 对 象 软件 的 最 小 可 测试 单元 不 是 单个 方法 ,而 是 类 或 对 象 ? 
. 类 测试 关注 的 内 容 是 什么 ? 

. 简 述 基于 UML 的 类 测试 策略 。 

. 简 述 面向 对 象 软件 的 集成 测试 的 作用 。 
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软件 测试 自动 化 


本 章 要 点 : 


自动 化 测试 的 优点 。 

对 自动 化 测试 的 认识 误区 。 
。 自动 化 测试 的 原理 和 方法 。 
主流 测试 工具 。 

。 WinRunner 及 其 使 用 。 


软件 测试 是 一 项 繁重 的 任务 ,难以 想象 能 完全 通过 手工 操作 来 完成 测试 任务 。 自 动 
化 测试 在 软件 测试 中 占有 很 大 的 比重 。 本 章 介绍 软件 测试 自动 化 的 若干 基本 概念 ,并 对 
主流 的 测试 工具 和 测试 工具 厂商 进行 了 介绍 ,最 后 用 较 大 篇 幅 介 绍 了 如 何 用 WinRunner 
进行 功能 测试 。 


9.1 自动 化 测试 概述 


1. 自动 化 测试 的 必要 性 

软件 测试 是 一 项 需要 付出 极 大 时 间 和 精力 的 工作 , 它 贯 穿 软 件 开 发 的 每 一 阶段 。 在 
一 个 软件 项 目的 开发 过 程 中 ,由 于 用 户 需求 . 开 发 方案 等 时 常 面临 变更 ,软件 测试 常 需 ; 
代 地 执行 , 若 不 对 测试 过 程 和 配置 进行 有 效 的 管理 ,无 法 很 好 地 完成 既定 的 测试 目标 ,发 
挥 测试 应 具有 的 作用 。 

和 迭代 的 测试 还 意味 着 回归 测试 的 执行 。 当 回归 的 次 数 太 多 ,而 全 部 依靠 人 工 来 完成 ， 
任何 人 都 会 有 难以 忍受 的 感觉 ,从 而 使 工作 热情 和 工作 质量 大 大 降低 。 

事实 上 ,软件 测试 本 身 的 特点 决定 了 测试 中 的 很 多 工作 (如 回归 测试 中 的 大 部 分 工 
作 ) 是 可 以 重复 执行 的 ,应 将 它们 独立 出 来 , 交 给 测试 工具 来 自动 实现 。 

综 上 所 述 ,基于 测试 过 程 管理 的 需求 和 软件 测试 活动 的 特点 ,用 测试 工具 代替 人 工 完 
成 部 分 测试 工作 ,也 就 是 进行 自动 化 测试 ,是 有 必要 且 可 行 的 。 

2. 自动 化 测试 的 优点 

与 人 工 测试 相 比 ,自动 化 测试 (Automated Testing) 主要 具备 如 下 优点 : 
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(1) 可 以 提高 软件 测试 的 效率 。 使 测试 人 员 能 更 加 专注 于 对 软件 中 新 的 项 目 进行 测 
试 ,从 而 提高 对 功能 点 及 其 他 特性 的 测试 覆盖 率 ; 有 利于 缩短 软件 的 开发 时 间 ; 使 得 测试 
人 员 在 一 定 程度 上 从 繁琐 的 人 工 测试 中 解脱 出 来 ,能 有 时 间 和 精力 去 关注 测试 领域 的 前 
沿 技术 ,提高 自身 的 从 业 素质 。 

(2) 对 测试 配置 (包括 软件 配置 .硬件 配置 ,人员 配置 等 ) 进 行 有 效 的 管理 ,并 使 测试 
配置 在 整个 测试 生命 周期 内 得 到 复 用 ,这 在 功能 测试 和 回归 测试 中 更 有 意义 。 

(3) 通过 测试 过 程 的 自动 化 管理 ,使 测试 实施 方 可 以 通过 流程 的 关键 绩效 指标 (Key 
Performance Indicator,KPI) 衡 量 测试 过 程 的 一 致 性 和 有 效 性 ,从 而 实现 从 软件 质量 保证 
向 软件 质量 管理 (Software Quality Management,SQM) 的 进化 。 

(4) 通过 对 测试 过 程 进行 规范 的 定义 ,避免 过 分 依赖 于 个 人 ,因而 减少 了 出 错 的 可 能 
性 ,提高 了 测试 的 可 靠 性 。 

(5) 减少 了 人 工 测试 ,从 而 在 一 定 程度 上 降低 了 测试 成 本 。 

(6) 可 以 执行 一 些 手 工 不 可 能 进行 的 测试 。 例 如 ,通过 测试 工具 模拟 真实 情况 对 软 
件 进行 压力 测试 、 容 量 测 试 等 。 

(7) 使 测试 变 得 更 加 有 趣 。 

软件 测试 自动 化 已 成 为 测试 行业 及 软件 开发 行业 的 大 势 所 趋 ,软件 测试 自动 化 的 水 
平 在 很 大 程度 上 代表 了 一 个 软件 开发 企业 或 测试 外 包 提 供 商 的 技术 实力 。 


9.2 自动 化 测试 的 引入 和 实施 


9.2.1 对 自动 化 测试 的 认识 误区 

虽然 自动 化 测试 有 着 许多 好 处 ,但 也 必须 清醒 地 意识 到 ,自动 化 测试 的 引入 不 是 一 跳 
而 就 的 ,自动 化 测试 本 身 也 不 是 万 能 的 。 对 于 自动 化 测试 ,人 们 在 认识 上 可 能 存在 以 下 

1. 自动 化 测试 应 完全 取代 人 工 测 试 

尽管 自动 化 测试 可 以 降低 人 工 测试 的 工作 量 , 但 并 不 能 完全 取代 人 工 测试 。100% 的 
自动 化 测试 只 是 一 个 理想 目标 ,即便 一 些 如 SAP,Oracle ERP 等 测试 库 规划 得 十 分 完善 
的 套件 ,其 测试 自动 化 率 也 不 超过 70%。 这 是 因为 自动 化 测试 本 身 的 特点 决定 了 它 发 现 
软件 缺陷 的 能 力 是 有 限 的 。 一 般 说 来 ,测试 过 程 中 80% 以 上 的 缺陷 是 人 工 测 试 发 现 的 ， 
仅 有 不 到 20% 的 缺陷 是 自动 化 测试 发 现 的 ,而 且 这 20% 要 求 企业 具有 较 高 的 自动 化 测试 
实施 水 平 。 

所 以 , 绝 不 要 强行 在 测试 的 每 个 部 分 都 采用 自动 化 方式 ,一味 地 追求 测试 自动 化 只 会 
给 企业 带 来 运作 成 本 的 急剧 上 升 。 

可 以 考虑 使 用 自动 化 测试 的 情形 主要 包括 : 对 主要 功能 的 测试 ;容易 自动 化 的 测试 ; 
人 工 难 以 进行 的 测试 ;运行 最 频繁 的 测试 和 回报 很 快 的 测试 。 


2. 测试 用 例 可 完全 由 测试 工具 自动 生成 
有 些 测试 工具 可 以 实现 部 分 测试 用 例 的 自动 生成 ,例如 C/C++ 单元 测试 工具 Visual 
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Unit 等 ,但 主要 用 于 检查 未 处 理 特殊 输入 而 形成 的 错误 。 ee 
设 定 测试 用 例 ,完成 白 盒 覆盖 时 ,测试 用 例 设 计 器 也 需要 人 工 干预 。 这 是 因为 测试 工具 无 
法 自动 了 解 程序 的 功能 ,自动 生成 的 测试 用 例 具有 很 大 的 局 限 性 。 ea 通 
常 只 能 发 现 异 常 之 类 的 极端 错误 ,大 多 数 一 般 错误 都 是 无 法 发 现 的 。 因 而 ,测试 用 例 主 要 
仍 是 通过 人 工 设 计 的 。 


3. 测试 工具 可 以 在 任何 场合 使 用 
测试 工具 都 是 针对 解决 特定 问题 而 开发 的 ,有 其 功能 的 局 限 性 。 而 且 作 为 软件 ,测试 
工具 也 存在 软件 兼容 性 等 方面 的 问题 。 


4. 自动 化 后 测试 效率 立刻 提高 

一 个 企业 决定 引入 测试 工具 实现 自动 化 测试 是 需要 做 大 量 前 期 准备 工作 的 ,这 些 工 
作 绝 不 是 在 很 短 时 间 内 就 能 够 完成 的 。 

必须 认识 到 ,要 实现 软件 测试 自动 化 ,仅仅 依靠 功能 强大 的 自动 化 测试 工具 及 自动 化 
管理 平台 是 不 够 的 ,测试 自动 化 的 实施 效果 更 依赖 于 软件 测试 自动 化 的 实现 过 程 ,以 及 在 
这 个 过 程 中 所 体现 的 软件 质量 管理 和 软件 测试 最 佳 实践 。 如 果 测 试 过 程 本 身 是 不 合理 
的 ,引入 自动 化 测试 只 会 使 软件 项 目 更 加 混乱 。 

此 外 ,企业 内 部 通常 存在 许多 不 同 种 类 的 应 用 平台 ,应 用 开发 技术 也 不 尽 相 同 ,其 至 
在 一 个 应 用 中 可 能 就 跨越 了 多 种 平台 ;或 由 于 开发 时 期 的 不 同 ,可 能 导致 同一 应 用 的 不 同 
版 本 之 间 也 存在 技术 差异 。 因 此 ,测试 自动 化 的 引入 必然 给 当前 企业 部 门 与 部 门 间 的 合 
作 , 以 及 现 有 的 应 用 平台 及 开发 工具 带 来 一 定 的 冲击 。 

因而 ,企业 在 决定 引入 自动 化 测试 之 前 ,应 先进 行 技术 ,资金 等 多 方面 细致 的 可 行 性 
分 析 。 如 果 付 出 大 量 的 人 力 、 物 力 和 财力 ,而 企业 自身 的 技术 ,流程 管理 水 平 、 员 工 素质 与 
实施 自动 化 测试 要 求 的 标准 还 有 较 大 距离 ,并且 在 短期 内 无 法 弥补 , 则 自动 化 测试 的 引入 
只 不 过 是 一 个 空 架子 ,将 使 企业 得 不 偿 失 。 

进行 可 行 性 分 析 后 ,车 决定 引入 自动 化 测试 ,企业 还 需要 进行 一 系列 工作 如 下 ,以 便 
为 自动 化 测试 的 顺利 引入 创造 良好 的 内 部 环境 。 

(1) 对 开发 及 测试 流程 进行 调整 与 改进 ,使 之 尽量 合理 ,规范 。 

(2) 对 现 有 的 应 用 平台 进行 必要 的 整合 。 

(3) 对 人 员 组 织 结构 进行 调整 。 

(4) 对 需求 .设计 ,编码 ,维护 及 配置 管理 等 其 他 方面 的 工作 进行 优化 。 

(5) 对 相关 员工 进行 培训 ,包括 测试 流程 .缺陷 管理 ,测试 工具 使 用 等 。 


5. 自动 化 测试 顺利 引入 后 就 一 劳 永 锡 了 

顺利 引入 自动 化 测试 工具 后 ,自动 化 测试 能 否 达 到 应 有 的 效果 还 取决 于 实施 过 程 中 
的 多 方面 因素 。 

(1) 自动 化 测试 能 提高 测试 效率 ,但 不 会 创造 性 地 发 现 测试 方案 里 没有 设计 缺陷 。 
因此 ,应 当 由 有 经 验 的 测试 人 员 对 自动 化 测试 方案 进行 系统 .周密 的 设计 。 

(2) 像 其 他 软件 开发 项 目 一 样 ,自动 化 测试 代码 也 需要 跟踪 和 维护 ,因此 应 使 用 配置 
管理 工具 来 对 脚本 进行 统一 管理 和 维护 。 此 外 ,引入 自动 化 测试 后 ,还 应 考查 其 工作 流程 
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是 否 合理 ,规范 。 总 之 ,对 自动 化 测试 实施 的 监督 和 评估 是 十 分 重要 的 。 
9.2.2 自动 化 测试 的 实施 流程 

下 面 简要 介绍 自动 化 测试 的 实施 流程 。 

(1) 选择 测试 工具 。 应 根据 本 企业 自身 的 业务 需求 和 平台 技术 选择 合适 的 测试 工 
具 。 显 然 ,由 于 业务 需求 和 应 用 平台 的 多 样 性 ,不 可 能 通过 一 个 测试 工具 解决 所 有 问题 。 
选择 测试 工具 的 依据 如 下 : 

@ 选择 测试 工具 时 应 充分 考虑 到 工具 的 可 集成 性 和 平台 兼容 性 ,因为 各 种 自动 化 测 
试 通常 需要 被 集成 起 来 ,统一 管理 。 

@ 在 经 费 有 限 的 情况 ,应 优先 考虑 测试 流程 管理 工具 ,其 次 考虑 性 能 测试 工具 ,再 考 
上 处 功能 测试 工具 。 

@ 应 考虑 测试 工具 对 测试 自动 化 方案 可 扩展 性 的 支持 ,以 满足 企业 技术 的 不 断 提升 
和 业务 需求 的 不 断 扩展 。 

@ 在 考虑 产品 性 价 比 的 同时 ,产品 的 支持 服务 和 售后 服务 的 完善 性 也 是 值得 关 
注 的 。 

@ 应 尽量 选择 主流 测试 工具 ,以 便于 通过 行业 间 交 流 甚 至 网 络 等 方式 获得 更 为 广 
泛 .便捷 的 支持 。 

(2) 对 于 特殊 的 业务 需求 , 若 不 能 通过 购买 现 有 工具 的 方式 来 实现 , 则 应 自行 开发 测 
试 工具 。 自 行 开发 测试 工具 可 以 在 工具 中 补偿 被 测 软件 缺乏 的 可 测试 性 。 

(3) 在 全 面 实施 自动 化 测试 之 前 ,可 以 先进 行 小 规模 的 试验 ,为 后 阶段 更 有 效 地 实施 
测试 打下 基础 。 

(4) 如 软件 生命 周期 有 需求 分 析 阶 段 一 样 ,在 对 一 个 项 目 实施 自动 化 测试 之 前 ,也 应 
进行 自动 化 测试 的 需求 分 析 ,也 就 是 确定 自动 化 测试 应 完成 的 功能 指标 。 

(5) 根据 自动 化 测试 的 需求 分 析 文档 ,设计 自动 化 测试 方案 。 设 计 方案 的 正确 与 否 
具体 决定 了 测试 脚本 发 现 缺 陷 的 能 力 , 因 此 应 特别 注意 设计 方案 的 合理 性 、 全 面 性 ,当然 
也 应 避免 宛 余 。 

(6) 接 下 来 可 以 进行 测试 脚本 的 开发 。 

(7) 使 用 配置 管理 工具 对 脚本 进行 统一 管理 和 维护 ,对 自动 化 测试 的 实施 进行 监督 
和 评估 。 

自动 化 测试 的 实施 流程 如 图 9-1 所 示 。 
选择 测试 工具 


1 Cn 
根据 需要 自行 开发 测试 工具 F 发 测试 脚本 
1 
进行 小 规模 测试 玉 一 管理 和 维护 胶 林 
- 实施 自动 化 测试 
进行 自动 化 测试 需求 分 析 
1 
设计 自动 化 测试 方案 对 测试 实施 结果 进行 监督 和 评估 


9-1 自动 化 测试 实施 流程 
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9.3 自动 化 测试 的 原理 和 方法 


自动 化 测试 基于 的 原理 和 方法 主要 有 脚本 预 处 理 、 脚 本 技术 和 自动 比较 技术 ,如 
图 9-2 所 示 。 
线性 脚本 
结构 化 脚本 
[多 本 技术 1 共享 有 本 
| [ww 
关键 字 驱 动 脚本 
美化 器 
i 
| 一 般 蔡 换 
静态 比较 
自动 比较 | 动态 比较 


图 9-2 自动 化 测试 的 原理 和 方法 


自动 化 测试 的 原理 和 方法 


9.3.1 脚本 技术 

测试 脚本 (Test Script) 是 与 特定 测试 对 应 的 一 系列 指令 (及 数据 ) ,这 些 指令 可 以 被 
测试 工具 自动 执行 。 脚 本 是 程序 的 一 种 形式 。 

脚本 可 通过 录制 测试 的 操作 产生 ,再 在 其 基础 上 进行 修改 ;当然 也 可 以 直接 用 脚本 语 
言 编写 脚本 。 

脚本 中 通常 包含 有 如 下 信息 : 

。 同步 ( 何 时 进行 下 一 个 输入 ) 。 

。 比较 信息 。 

。 捕获 何 种 屏幕 数据 ,存储 在 何 处 。 

。 从 其 他 数据 源 读 取 数 据 信息 。 

。 控制 信息 。 

脚本 可 分 为 线性 脚本 ,结构 化 脚本 .共享 脚本 .数据 驱动 脚本 和 关键 字 驱动 脚本 等 。 


1. 线性 脚本 
线性 脚本 是 录制 手工 执行 的 测试 用 例 得 到 的 脚本 。 这 种 脚本 包含 所 有 用 户 的 键盘 和 


鼠标 输入 ,所 有 录制 的 测试 用 例 可 以 通过 脚本 完整 地 被 回放 。 
在 线性 脚本 中 可 以 加 入 简单 的 指令 ,例如 时 间 等 待 、 比 较 等 。 
线性 脚本 适合 于 简单 的 测试 (例如 Web 页 面 测试 ) 一 次 性 测试 .脚本 的 初始 化 .软件 


演示 或 培训 等 场合 。 
尽管 线性 脚本 的 录制 方便 ,但 其 测试 输入 和 比较 是 捆绑 在 脚本 中 的 ,无 法 实现 脚本 共 


享 , 且 线性 脚本 修改 代价 大 、 维 护 成 本 高 。 


2. 结构 化 脚本 
结构 化 脚本 侧重 于 描述 脚本 中 控制 流程 的 结构 化 特性 。 结 构 化 脚本 中 的 控制 流程 或 


AAA 
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为 控制 结构 ,或 为 调用 结构 。 

控制 结构 中 包括 顺序 、 循 环 和 分 支 结构 。 调 用 结构 则 是 在 一 个 脚本 中 调用 另外 脚本 ， 
当 子 脚本 执行 完成 后 再 返回 父 脚 本 继续 运行 。 

结构 化 脚本 的 优点 是 健壮 性 好 、 易 于 维护 , 且 可 以 通过 循环 和 调用 减少 工作 量 。 

结构 化 脚本 的 主要 缺点 是 测试 数据 仍然 捆绑 在 脚本 中 ,无 法 实现 脚本 共享 。 


3. 共享 脚本 

共享 脚本 是 指 脚本 可 以 被 多 个 测试 使 用 ,一 个 脚本 可 以 被 另外 一 个 脚本 调用 。 

共享 脚本 可 以 是 在 不 同 主机 、 不 同系 统 之 间 共 享 脚本 ,也 可 以 是 在 同一 主机 、 同 一 系 
统 之 间 共 享 脚本 。 这 样 可 以 节省 生成 脚本 的 时 间 , 当 重复 任务 发 生变 化 时 只 需 修 改 一 个 
脚本 。 

共享 脚本 的 优点 如 下 : 

。 可 以 较 少 的 开销 实现 类 似 的 测试 。 

。 维护 开销 低 于 线性 脚本 。 

。 可 以 在 脚本 中 增加 更 智能 的 功能 。 
通过 共享 脚本 技术 ,还 可 以 建立 脚本 库 , 达 到 最 大 限度 的 共享 。 
共享 脚本 的 主要 缺点 是 需要 跟踪 更 多 的 脚本 ,给 配置 管理 带 来 一 定 的 困难 。 


4. 数据 驱动 脚本 

数据 驱动 脚本 技术 将 测试 输入 存储 在 独立 的 数据 文件 中 ,而 不 是 绑 定 在 脚本 中 。 执 
行 时 是 从 数据 文件 而 不 是 从 脚本 中 读 和 数据。 这 种 方法 最 大 的 好 处 是 可 以 用 同一 个 脚本 
做 不 同 的 测试 。 

使 用 数据 驱动 脚本 ,可 以 以 较 小 的 开销 实现 较 多 的 测试 用 例 ,这 可 以 通过 为 一 个 测试 
脚本 指定 不 同 的 测试 数据 文件 达到 。 将 数据 文件 单独 列 出 ,选择 合适 的 数据 格式 和 形式 ， 
可 将 用 户 的 注意 力 集中 到 数据 的 维护 和 测试 上 。 

数据 驱动 脚本 的 优点 如 下 : 

。 可 以 快速 增加 类 似 的 测试 。 

。 测 试 者 增加 新 测试 不 需要 掌握 工具 脚本 语言 的 技术 。 

。 对 第 二 个 及 以 后 类 似 的 测试 无 额外 的 维护 开销 。 

数据 驱动 脚本 的 缺点 是 初始 建立 的 开销 较 大 , 且 需 要 专业 (编程 ) 支 持 。 


5. 关键 字 驱 动 脚本 

关键 字 驱 动 脚本 技术 实际 上 是 数据 驱动 脚本 技术 的 逻辑 扩展 。 它 将 数据 文件 变 成 测 
试用 例 的 描述 ,用 一 系列 关键 字 指 定 要 执行 的 任务 。 在 关键 字 驱 动 技 术 中 ,假设 测试 者 具 
有 某 些 被 测 系 统 的 知识 ,因而 不 必 告 诉 测试 者 如 何 进 行 详细 的 动作 ,只 是 说 明 测试 用 例 做 
什么 ,而 不 是 如 何 做 。 这 样 在 脚本 中 使 用 的 是 说 明 性 方法 和 描述 性 方法 。 描 述 性 方法 将 
被 测 软件 的 知识 建立 在 测试 自动 化 环境 中 ,这 种 知识 包含 在 支持 脚本 中 。 

例如 ,为 完成 在 网 页 浏览 时 输入 网 址 ,一 般 的 脚本 需要 说 明 在 某 某 窗口 的 某 某 控件 中 
输入 什么 字符 。 而 在 关键 字 驱 动 脚本 中 ,可 以 直接 是 在 地 址 栏 中 输入 网 址 ,甚至 更 简单 ， 
仅 说 明 输入 什么 网 址 。 
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关键 字 驱 动 脚本 的 数量 不 随 测 试用 例 的 数量 变化 ,而 仅 随 软件 规模 而 增加 。 这 种 脚 
本 还 可 以 实现 跨 平台 的 用 例 共享 ,只 需要 更 改 支持 脚本 即 可 。 

关键 字 驱 动 脚本 技术 常 与 数据 驱动 脚本 技术 一 起 使 用 。 
9.3.2 脚本 预 处 理 

脚本 的 预 处 理 是 指 脚 本 在 被 工具 执行 之 前 必须 进行 编译 , 预 处 理 功 能 通常 需要 工具 
支持 。 脚 本 预 处 理 的 功能 主要 有 美化 器 ,静态 分 析 和 一 般 蔡 换 。 

美化 器 是 一 种 对 脚本 格式 进行 检查 的 工具 ,必要 时 可 以 对 脚本 进行 转换 ,以 符合 编程 
规范 的 要 求 。 美 化 器 可 以 让 脚本 编写 者 更 专注 于 技术 性 工作 。 

静态 分 析 对 脚本 或 表格 执行 更 重要 的 检查 功能 ,检查 脚本 中 出 现 的 和 可 能 出 现 的 缺 
陷 。 通 常 , 该 测试 工具 可 以 发 现 一 些 如 拼写 错误 或 不 完整 指令 等 脚本 缺陷 ,类 似 于 程序 设 
计 中 的 PC-Lint 和 LogiScope 的 功能 。 

一 般 蔡 换 也 就 是 宏 蔡 换 。 可 以 让 脚本 更 明确 .易于 维护 。 使 用 替换 时 ,应 注意 不 要 执 
行 不 必要 的 蔡 换 。 
9.3.3 自动 比较 技术 

测试 验证 是 检验 软件 是 否 产 生 了 正确 输出 的 过 程 ,是 通过 在 测试 的 实际 输出 与 预期 
输出 之 间 完 成 一 次 或 多 次 比较 实现 的 。 比 较 器 可 以 检测 两 组 数据 是 否 相 同 ,功能 较 齐 全 
的 比较 器 还 可 以 标识 有 差异 的 内 容 。 但 比较 器 并 不 能 告诉 用 户 测试 是 否 通 过 或 失败 , 需 
要 用 户 自行 判断 。 

自动 比较 的 内 容 可 以 是 多 方面 的 ,包括 基于 磁盘 输出 的 比较 ,例如 对 数据 文件 的 比 
较 ; 基 于 界面 输出 的 比较 ,例如 对 显示 位 图 的 比较 ;基于 多 媒体 输出 的 比较 ,例如 对 声音 的 
比较 ;还 包括 其 他 输出 内 容 的 比较 。 

自动 比较 可 分 为 静态 比较 和 动态 比较 。 动 态 比 较 是 在 测试 过 程 中 进行 比较 ,静态 比 
较 是 不 在 测试 过 程 中 进行 比较 ,而 是 将 测试 结果 存 人 数据 文件 ,再 通过 工具 进行 比较 。 

自动 比较 还 可 以 分 为 简单 比较 和 智能 比较 。 简 单 比较 查看 实际 输出 与 预期 输出 是 否 
完全 相同 。 智 能 比较 则 允许 用 已 知 的 差异 比较 实际 输出 和 预期 输出 。 例 如 ,要 求 比较 包 
含 日 期 信息 的 输出 报表 的 内 容 , 如 果 使 用 简单 比较 显然 是 不 行 的 ,因为 每 次 生成 报表 的 日 
期 信息 肯定 是 不 同 的 。 这 时 就 需要 智能 比较 ,忽略 日 期 的 差别 ,比较 其 他 内 容 如 日 期 格 
式 。 智 能 比较 需要 使 用 到 较为 复杂 的 比较 手段 ,包括 正则 表达 式 的 搜索 技术 .屏蔽 的 搜索 


9.4 对 产品 可 测试 性 的 考虑 


软件 产品 一 般 会 用 到 下 面 三 种 不 同类 别 的 接口 : 命令 行 接口 (Command Line 
Interfaces,CLIs)、 应 用 程序 接口 (API) 和 图 形 用 户 接口 (GUI)。 这 些 接口 都 是 被 测试 的 
对 象 。 

从 本 质 上 看 ,API 接口 和 命令 行 接口 比 GUI 接口 容易 实现 自动 化 测试 。 导 致 GUI 
自动 化 测试 复杂 的 原因 主要 有 : 
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需要 手工 完成 部 分 脚本 ; 

把 GUI 自动 化 测试 工具 和 被 测试 的 产品 有 机 地 结合 在 一 起 需要 面临 技术 上 的 
挑战 ; 

GUI 设计 方案 的 变动 将 直接 带 来 GUI 自动 化 测试 复杂 度 的 提高 ,而 GUI 设计 方 
案 的 变动 又 是 时 常 发 生 的 。 

因此 ,为 了 降低 自动 化 测试 复杂 度 , 应 确定 被 测 产品 是 否 包含 API 接口 或 命令 行 接 
口 。 有 些 时 候 ,这 两 类 接口 隐藏 在 产品 的 内 部 ,需要 细致 地 分 析 才 能 找到 。 

对 于 隐藏 可 编程 接口 ,InstallShield 这 一 当前 非常 流行 的 制作 安装 盘 的 工具 就 有 命 
令 行 选项 ,采用 这 种 选项 可 以 实现 非 GUI 方式 的 安装 盘 , 从 提前 创建 好 的 文件 中 读 取 安 
装 选项 。 这 种 方式 比 采 用 GUI 安装 方式 更 简单 也 更 可 靠 。 

为 了 让 API 接口 测试 更 为 容易 ,应 该 把 接口 与 某 种 解释 程序 ,例如 Tcl,Perl 或 者 
Python 绑 定 在 一 起 。 这 使 交互 式 测试 成 为 可 能 ,并 且 可 以 缩短 自动 化 测试 的 周期 。 采 用 
API 接口 方式 ,还 可 以 实现 独立 的 产品 模块 的 单元 测试 自动 化 。 

如 果 确 实 没 有 找到 命令 行 接口 或 者 API 接口 ,开发 人 员 最 好 对 产品 进行 改造 ,以 提 
供 命令 行 接口 或 者 API 接口 ,从 而 支持 产品 的 可 测试 性 。 


9.5 测试 工具 概述 


测试 工具 可 以 是 测试 管理 工具 ,性 能 测试 工具 、 功 能 测试 工具 或 白 盒 测试 工具 ,这 些 
主要 是 HP Mercury,IBM Rational, Segue,Compuware 和 Empirix 等 公司 的 产品 ,以 及 
相当 数量 的 开源 测试 工具 。 在 商业 化 测试 工具 中 , HP Mercury 公司 的 产品 所 占有 的 市 
场 份额 最 大 。 

注意 ,所 谓 开 源 工 具 是 指 开 放 源 代码 的 测试 工具 。 与 商业 测试 工具 相 比 ,开源 测试 工 
具 具 有 小 巧 .灵活 、 易 扩展 .免费 等 特性 。 但 开源 工具 缺乏 使 用 培训 和 技术 支持 ,工具 的 用 
户 界 面 一 般 也 较为 粗糙 。 技 术 水 平 较 高 的 测试 人 员 ,或 经 费 紧 张 的 中 小 企业 ,可 考虑 使 用 
开源 工具 。 


9.5.1 主流 测试 工具 


1. 测试 管理 工具 

测试 管理 工具 对 测试 配置 和 测试 过 程 进行 管理 ,对 缺陷 进行 跟踪 管理 。 

主要 的 测试 管理 工具 如 下 : 

。 HP Mercury 公司 的 TestDirector( 基 于 Web 集成 的 全 球 测试 管理 工具 ) 。 

。 IBM Rational 公司 的 TestManager( 管 理 所 有 测试 活动 和 工件 的 核心 平台 )。 
ClearQuest( 变 更 和 缺陷 跟踪 、 管 理工 具 ) ; ClearCase( 管 理 变更 和 资源 ,控制 开发 
过 程 中 发 展演 化 的 一 切 内 容 ) 和 RequisitePro( 需 求 管理 工具 ) 。 

Segue 公司 的 SilkCentral Test Manager (测试 管理 工具 ) 和 SilkCentral Issue 
Manager( 缺 陷 管 理工 具 ) 。 

Empirix 公司 的 e-Monitor( 应 用 监控 工具 )。 


2. 
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Compuware 公司 的 QADirector (基于 分 布 式 应 用 的 高 级 测试 管理 工具 ) 和 
TrackRecord( 变 更 和 缺陷 跟踪 、 管 理工 具 ) 。 

T-Plan 公司 的 T-Plan( 测 试 过 程 管理 工具 ) 。 

Atlassian 公司 JIRA( 基 于 J2EE 技术 的 缺陷 管理 工具 ) 。 
Bugzilla( 缺 陷 管 理 开源 工具 )。 

Bugzilla Test Runner( 基 于 Bugzilla 缺陷 管理 系统 的 测试 用 例 管理 开源 工具 ) 。 
CVS( 版 本 控制 开源 工具 )。 

TestLink( 基 于 Web 的 测试 管理 和 执行 开源 工具 )。 

Mantis( 基 于 Web 的 缺陷 管理 开源 工具 )。 


功能 测试 工具 


典型 的 功能 测试 工具 如 下 : 


3。 


HP Mercury 公司 的 WinRunner( 功 能 测试 及 回归 测试 工具 ) 和 QuickTest Pro 
(B/S 系统 的 功能 测试 工具 ) 。 

IBM Rational 公司 的 Robot( 客 户 机 /服务 器 应 用 程序 的 功能 和 性 能 测试 工具 )， 
XDE Tester(Java 和 Web 应 用 的 功能 测试 和 回归 测试 工具 ) 和 TeamTest( 用 于 
功能 测试 .性 能 测试 .回归 测试 .测试 管理 ,降低 软件 发 布 风险 ,缩短 软件 上 市 
时 间 ) 。 

Compuware 公司 的 QARun( 功 能 测试 和 回归 测试 工具 ) 。 

Segue 公司 的 SilkTest( 功 能 测试 和 回归 测试 工具 ) 。 

Empirix 公司 的 e-Tester(Web 应 用 的 功能 测试 工具 ) 。 

Radview 公司 的 WebFT( 模 拟 单 用 户 对 Web 系统 进行 功能 测试 ) 。 
WebInject( 针 对 Web 应 用 程序 和 服务 的 功能 测试 开源 工具 ) 。 

MaxQ(Web 功能 测试 开源 工具 ) 。 


性 能 测试 工具 


典型 的 性 能 测试 工具 如 下 : 


HP Mercury 公司 的 LoadRunner( 预 测 系统 行为 和 性 能 的 负载 测试 工具 ) 。 

IBM Rational 公司 的 Robot 和 TeamTest。 

Compuware 公司 的 QALoad( 企 业 级 负载 测试 工具 ) ,EcoTools( 高 层次 的 性 能 监 
测 工具 ) 和 EcoScope( 应 用 性 能 优化 工具 ) 。 

TestBytes( 数 据 库 测试 数据 自动 生成 工具 ) 。 

Segue 公司 的 SilkPerformer( 企 业 级 性 能 测试 工具 )。 

Empirix 公司 的 e-Load(Web 应 用 的 压力 测试 工具 ) 。 

Radview 公司 的 WebLoad(Web 压力 测试 工具 ) 。 

MicroSoft 公司 的 Web Application Stress Tool(WAS)(Web 压力 测试 工具 ) 。 
Parasoft 公司 的 Insure ++ (针对 C/C++ 语言 的 实时 性 能 监控 及 分 析 优 化 工具 ) 和 
Jcontract( 针 对 Java 的 实时 性 能 监控 及 分 析 优 化 工具 )。 

DBMonster(SQL 数据 库 的 压力 测试 开源 工具 )。 
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OpenSTA(B/S 结构 的 性 能 测试 开源 工具 ,基于 CORBA 体系 ) 。 
。 Apache JMeter( 针 对 HTTP 或 FTP 服务 器 应 用 程序 的 性 能 测试 开源 工具 ,基于 
Java) 。 


Web Application Load Simulator(LoadSim ,网 络 应 用 程序 的 负载 模拟 器 ,开源 
开具 9》s 


4. 和 白 盒 测试 工具 
典型 的 白 盒 测试 工具 如 下 : 
。 Compuware 公司 的 NuMega DevPartner Studio( 白 盒 测试 工具 ) 。 
。IBM Rational 公司 的 PurifyPlus (单元 测试 和 可 靠 性 测试 工具 ,包括 
PureCoverage,Purify 和 Quantify) 。 
Parasoft 公司 的 Jtest(Java 单元 测试 工具 ) ,Parasoft 公司 的 Jcontract(Java 实时 
性 能 监控 及 分 析 优 化 工具 );C ++ Test(C/C ++ 单元 测试 工具 );CodeWizard(C/ 
C++ 代码 静态 分 析 工 具 );. test(. Net 代码 分 析 和 动态 测试 工具 ) 和 Insure ++ (C/ 
C++ 实时 性 能 监控 和 分 析 优 化 工具 ) 。 
凯 乐 软件 公司 的 Visual Unit( 国 产 的 C/C++ 单元 测试 工具 ,申请 了 多 项 专利 , 拥 
有 一 批 创新 的 技术 ) 。 
XUnit 系列 开源 框架 。 这 是 目前 最 流行 的 单元 测试 开源 框架 ,根据 支持 的 语言 环 
境 不 同 ,可 分 为 JUnit(Java) ,CppUnit(C ++ ),DUnit(Delphi) ,PhpUnit(PHP) ， 
AUnit(Ada), DotUnit (. NET ), HttpUnit ( Web), HtmlUnit ( Web), JsUnit 
(Javascript) ,PhpUnit(PHP) .PerlUnit(Perl) ,XmlUnit(XML) 等 。 
9.5.2 IBM Rational 软件 自动 化 测试 解决 方案 

IBM Rational 软件 自动 化 测试 解决 方案 的 三 个 最 佳 成 功 经 验 是 尽早 测试 .连续 测试 
和 自动 化 测试 ,并 在 此 基础 上 提供 了 完整 的 软件 测试 流程 和 一 整套 软件 自动 化 测试 工具 ， 
为 企业 自动 化 测试 提供 了 优良 的 解决 方案 。 


1. IBM Rational 软件 自动 化 测试 解决 方案 的 最 佳 成 功 经 验 

(1) 尽早 测试 

IBM Rational 公司 主要 在 以 下 三 个 方面 为 其 产品 用 户 提供 尽早 测试 的 软件 工程 
技术 。 

首先 ,软件 的 整个 测试 生命 周期 是 与 软件 的 开发 生命 周期 基本 平 齐 的 过 程 。 即 当 需 
求 分 析 基 本 明确 后 ,就 应 该 基于 需求 分 析 的 结果 和 整个 项 目 计划 进行 软件 的 测试 计划 ; 伴 
随 着 分 析 设 计 过 程 ,同时 应 该 完成 测试 用 例 设 计 ; 当 软 件 的 第 一 个 发 布 出 来 后 ,测试 人 员 
应 立即 基于 它 进行 测试 脚本 的 实现 ,并 基于 测试 计划 中 的 测试 目的 执行 测试 用 例 , 对 测试 
结果 做 评估 报告 ,从 而 通过 各 种 测试 指标 实时 监控 项 目 质量 状况 ,提高 对 整个 项 目的 控制 
和 管理 能 力 。 

其 次 ,应 进行 迭代 测试 。 即 将 原来 的 整个 软件 开发 生命 周期 分 成 多 个 迭代 周期 ,在 每 
个 迭代 周期 都 进行 测试 ,这 样 在 很 大 程度 上 提前 了 软件 系统 测试 发 生 的 时 间 ,以 尽早 发 现 
关键 问题 ,降低 项 目 风险 和 项 目 开发 成 本 。 
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第 三 ,IBM Rational 公司 还 扩展 了 传统 软件 测试 从 单元 测试 、 集 成 测试 到 系统 测试 、 
验收 测试 的 阶段 划分 ,将 整个 软件 的 测试 按 阶段 划分 成 开发 人 员 测 试 和 系统 测试 两 个 阶 
段 。 通 过 将 测试 时 间 提 前 ,尽早 地 发 现 软件 中 的 缺陷 ,降低 软件 测试 成 本 。 

(2) 连续 测试 

在 开发 过 程 中 的 每 次 迭代 开始 前 都 要 根据 项 目 当前 的 状态 和 所 要 达到 的 阶段 性 目标 
制定 迭代 计划 ,而 且 每 个 迭代 中 都 包括 需求 .设计 编码、 集成 ,测试 等 一 系列 开发 活动 ,都 
会 增 量 式 地 集成 一 些 新 的 系统 功能 。 通 过 每 次 迭代 ,都 将 产生 一 个 可 运行 的 系统 ,通过 对 
这 个 可 运行 系统 的 测试 来 评估 该 次 迭代 是 否 达到 预定 的 迭代 目标 ,并 以 此 为 依据 制定 下 
一 次 迭代 的 目标 。 

由 此 可 见 , 在 迭代 式 软件 开发 的 每 个 迭代 周期 ,都 会 进行 软件 测试 活动 ,整个 软件 测试 
的 完成 是 通过 每 个 迭代 周期 不 断 地 增 量 测试 和 回归 测试 实现 的 。 这 就 是 连续 测试 的 概念 。 

连续 测试 不 但 能 够 持续 地 提高 软件 质量 ,同时 也 使 系统 测试 的 尽早 实现 成 为 可 能 ,从 
而 有 效 地 控制 开发 风险 ,减低 测试 成 本 并 保证 项 目 进度 。 

(3) 自动 化 测试 

IBM Rational 公司 通过 一 套 完 整 的 软件 测试 工具 ,在 实现 测试 管理 流程 的 基础 上 , 同 
时 涵盖 了 功能 测试 .性 能 测试 和 可 靠 性 测试 的 自动 化 测试 需求 , 且 通 过 工具 之 间 的 集成 完 
成 测试 资源 的 整合 。 

2. IBM Rational 软件 测试 流程 

IBM Rational 软件 的 测试 流程 ,不 仅 包含 完整 的 软件 测试 流程 框架 ,还 提供 了 内 符 软 
件 测 试 流程 测试 管理 工具 的 支持 。 

(1) IBM Rational 软件 测试 流程 框架 

IBM Rational 统一 开发 流程 (Rational Unified Process, RUP) 提 供 了 一 套 完整 的 测 
试 流程 框架 ,软件 测试 团队 可 以 它 为 基础 ,根据 业务 发 展 的 实际 要 求 ,定制 符合 团队 使 用 
的 软件 测试 流程 。RUP 中 的 软件 测试 流程 如 下 : 

@ 制定 测试 计划 。 

@ 设计 测试 。 

@ 实施 测试 。 

@ 执行 测试 且 评 估 测 试 。 

@ 阁 还 需 进 行 回归 测试 , 转 步骤 @ ,否则 结束 整个 测试 流程 。 

(2) 利用 IBM Rational 软件 测试 管理 平台 实现 软件 自动 化 测试 流程 

IBM Rational 在 RUP 测试 方法 论 的 基础 上 构建 了 软件 自动 化 测试 管理 平台 工具 
TestManager, 通 过 与 测试 需求 管理 工具 RequisitePro 缺陷 管理 工具 ClearQuest 的 完美 
集成 ,实现 了 对 整个 软件 测试 生命 周期 的 管理 ,可 以 帮助 软件 测试 团队 快速 建立 软件 测试 
平台 和 测试 管理 流程 。 

TestManager 能 与 Rational 其 他 工具 无 颖 地 集成 ,整合 了 从 测试 需求 ,测试 计划 、 测 
试 设计 ,测试 实施 ,测试 执行 到 测试 结果 分 析 、 测 试 报告 的 自动 生成 等 整个 测试 生命 周期 
的 管理 活动 , 完成 对 包括 产品 的 功能 性 、 可 靠 性 和 性 能 等 全 方位 的 测试 ,方便 测试 管理 人 
员 进 行 软件 测试 过 程 监控 和 有 关 软 件 质 量 的 各 种 量化 指标 的 采集 、 分 析 ; 同 时 ,统一 组 织 
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各 种 测试 用 例 及 测试 脚本 等 测试 配置 .高 效 地 进行 回归 测试 。 


3. IBM Rational 软件 自动 化 测试 工具 的 功能 

除了 测试 流程 管理 外 ,IBM Rational 软件 自动 化 测试 工具 还 可 以 完成 如 下 功能 。 

(1) 实现 自动 化 功能 和 性 能 测试 

IBM Rational 测试 方案 通过 TestManager 和 Robot, 在 实现 测试 管理 流程 的 同时 ,能 
够 完成 功能 测试 和 性 能 测试 。 

Q@ 自动 化 功能 测试 。 功 能 测试 主要 围绕 Windows 图 形 界 面 . 字 符 终端 和 Browser 
界面 进行 测试 。 客 户 端 可 以 使 用 VC,VB,PB,Delphi 等 编制 的 软件 .各 种 字符 终端 软件 
或 者 浏览 器 应 用 ,通过 自动 录制 形成 测试 脚本 ,实现 自动 化 功能 测试 和 回归 测试 。 

IBM Rational 的 功能 测试 解决 方案 的 目标 ,是 使 功能 性 测试 变 得 更 简单 有 效 并 可 重 
复 执行 ,从 而 提升 功能 测试 能 力 。 它 主要 具有 以 下 特点 : 

。 对 各 种 环境 (IDE) 中 开发 的 应 用 程序 、 字 符 终 端 软件 ,便捷 地 完成 包括 测试 计划 、 
测试 设计 ,测试 实施 ,测试 执行 和 测试 结果 分 析 等 全 部 测试 流程 。 
便于 录制 或 编写 各 种 功能 测试 脚本 ,实现 自动 化 的 功能 测试 和 回归 测试 。 
利用 数据 池 方 便 地 解决 大 批量 数据 驱动 的 功能 测试 。 
便捷 地 完成 分 布 式 功能 测试 ,可 以 一 次 测试 多 种 测试 平台 。 

能 够 自动 完成 功能 测试 需求 覆盖 ,确保 应 用 程序 满足 产品 规格 说 明和 测试 计划 的 
每 一 个 业务 需求 。 

IBM Rational Robot 是 一 个 强大 的 功能 测试 工具 , 它 可 以 对 使 用 各 种 集成 开发 环境 
(IDE) 和 语言 建立 的 软件 应 用 程序 ,创建 、 修 改 并 执行 自动 化 的 功能 测试 .分 布 式 功能 测 
试 . 回 归 测 试 和 集成 测试 。 

Robot 是 测试 . NET 应 用 程序 的 首选 工具 ,因为 它 是 唯一 可 以 为 . NET 控件 (包括 
VB .NET,C# ,J# 和 Managed C ++ ) 的 测试 提供 全 面 的 本 机 支持 的 测试 工具 。Robot 
可 以 将 基于 Microsoft Visual Studio .NET WinForms 和 WebForms 构架 的 应 用 程序 的 
功能 测试 .分 布 式 功 能 测试 和 回归 测试 自动 化 ,并 将 . NET 应 用 程序 的 配置 测试 加 以 简化 
和 自动 化 。 

IBM Rational Robot 是 IBM Rational Suite 9 产品 家 族 中 的 一 员 。Rational Suite 家 
族 提供 了 综合 的 开发 平台 ,可 统一 开发 团队 ,优化 个 体 效率 ,并 简化 IBM Rational 解决 方 
案 的 实施 。 

Robot 的 主要 作用 及 特点 如 下 : 

。 支持 多 种 IDE。 Microsoft VisualStudio . NET, Oracle Developer/2000, Delphi， 
PeopleSoft 和 PowerBuilder。 
支持 多 种 语言 。Java, HTML, DHTML, Visual Basic, Visual C ++, ActiveX 
和 XML。 
自动 GUI 功能 测试 。 
执行 分 布 式 功能 测试 。 
测试 所 有 . NET 本 机 控件 ,包括 VB . NET,C# ,J# 和 Managed C++ 。 

在 SQA Basic, VB 和 VU(Virtual User, 虚 拟 用 户 ) 环 境 下 创建 并 编辑 脚本 。 
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Robot 编辑 器 提供 有 色 代 码 命令 .并且 在 强大 的 集成 脚本 开发 阶段 提供 键盘 
帮助 。 
。 脚本 回放 阶段 收集 应 用 程序 诊断 信息 ,Robot 与 Rational Purify,Quantify,Pure 
Coverage 集成 ,可 以 通过 诊断 工具 回放 脚本 ,在 日 志 中 查看 结果 。 
。 执行 完整 的 性 能 测试 。Robot 和 TestManager 协作 可 以 记录 和 回放 脚本 ,这些 脚 
本 有 助 于 断定 多 客户 系统 在 不 同 负载 情况 下 是 否 能 够 按照 用 户 定义 的 标准 运行 。 
为 了 提高 对 Java 和 Web 开发 的 应 用 软件 功能 测试 的 支持 ,IBM Rational 的 功能 测 
试 的 解决 方案 还 提供 了 IBM Rational XDE Tester。 它 主要 用 于 在 Windows 和 Linux 平 
台 上 基于 Java 和 Web 开发 的 应 用 软件 的 功能 测试 ,是 业内 最 先进 、 省 时 的 Java 和 Web 
应 用 的 测试 工具 ,不 仅 节省 了 Java 和 Web 测试 人 员 的 时 间 ,而且 使 应 用 的 测试 更 加 彻 
底 。XDE Tester 尤其 适用 于 使 用 IBM WebSphere Studio, Eclipse 和 Rational XDE 
Developer 等 开发 平台 进行 软件 开发 的 团队 。 
XDE Tester 最 重要 的 特性 如 下 : 
。 测试 Java 应 用 程序 (J2EE,J2SE,SWT,AWT/JFC 控件 )。 
。 测试 Web 应 用 程序 (HTML,DHTML,XML,JavaScript,Java Applet) 。 
。 用 Java 编写 测试 脚本 ,方便 了 测试 的 自 定义 用 户 界面 和 Java 控制 ,提高 了 项 目的 
。 使 用 ScriptAssure 技术 ,帮助 创建 灵活 、 可 重用 的 测试 脚本 , 极 大 地 提高 了 脚本 的 
可 维护 性 , 且 可 以 对 动态 数据 进行 无 缝 验证 。 
。 与 Rational 团队 沟通 工具 集成 。 
。 与 Eclipse Shell, WebSphere Studio 和 Rational XDE Developer 无 颖 地 集成 ,使 测 
试 平 台 扩展 能 入 Eclipse Shell, WebSphere Studio 和 Rational XDE Developer 开 
发 平台 ,统一 了 测试 和 开发 环境 。 
只 有 IBM Rational XDE Tester 才能 为 测试 人 员 提 供 : 
。 将 Java 作为 测试 脚本 语言 。 
。 ScriptAssure 技术 。 
。 强大 的 测试 开发 环境 Eclipse Shell。 
。 在 IBM WebSphere Studio 和 IBM Rational XDE Developer 内 安装 测试 工具 。 
IBM Rational XDE Tester 集成 了 一 组 强大 的 功能 ,包括 测试 管理 ,缺陷 跟踪 \ 测 试 脚 
本 版 本 控制 和 需求 管理 ,统称 为 [BM Rational 团队 统一 平台 (IBM Rational Team 
Unifying Platform)。 平台 上 的 工具 为 团队 内 的 协调 提供 了 极 大 的 便利 条 件 , 加 速 了 开发 
的 进程 。 
ScriptAssure 是 一 组 独特 的 功能 ,具备 以 下 优点 : 
。 人 允许 设置 测试 脚本 对 GUI 变更 的 敏感 性 ,无 须 在 应 用 的 各 个 版 本 间 更 新 测试 
脚本 。 
。 允许 在 修改 界面 之 前 就 开始 测试 GUI 功能 。 
。 允许 检查 一 系列 可 接受 的 响应 ,从 而 方便 地 验证 动态 应 用 内 容 。ScriptAssure 技 
术 可 以 节省 测试 人 员 的 实际 测试 时 间 。 
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IBM Rational XDE Tester 利用 Eclipse 或 IBM WebSphere Studio 的 强大 功能 作为 
其 测试 开发 环境 ,这 为 测试 人 员 提 供 了 下 列 优势 : 
专业 的 开发 环境 。 

有 具备 代码 的 现代 编辑 器 ,协助 创建 和 编辑 测试 脚本 。 

。 完整 的 调试 器 ,可 以 非常 容易 地 识别 和 解决 测试 脚本 中 的 问题 。 

。 一 条 直接 与 开发 人 员 沟 通 的 途径 。 

@ 自动 化 压力 测试 。Rational 性 能 测试 解决 方案 可 以 方便 灵活 地 模拟 各 种 负载 模 
型 ,完成 以 查找 响应 时 间 瓶 颈 . 系 统 吞吐 量 . 最 大 并 发 虚拟 用 户 等 为 目标 的 各 种 要 求 的 性 
能 测试 。 具 体 包括 如 下 : 

。 利用 TestStudio 可 以 完成 对 压力 测试 的 测试 需求 .测试 计划 ,测试 设计 、 测 试 实 

施 、 测 试 执行 和 测试 结果 分 析 等 整个 测试 生命 周期 的 管理 。 

。 利用 TestStudio 中 的 Test Suite, 能 够 方便 地 完成 压力 测试 对 负载 模型 的 各 种 
要 求 , 包 括 : 建立 复杂 的 Scenario 模型 ; 准确 模拟 复杂 负载 的 时 序 控 制 ; 
基于 Transaction 的 负载 分 析 ; 建 立 面向 目标 的 事务 负载 模型 ;响应 时 间 精 确 到 
1/100 秒 ; 支 持 不 同 虚拟 用 户 的 不 同 IP 地 址 模拟 和 准确 的 波 特 率 模 拟 。 

。 利用 TestStudio ,能 够 方便 地 完成 压力 测试 过 程 中 各 种 指标 的 观测 。 

。 利用 TestStudio ,能 够 方便 地 完成 压力 测试 结果 分 析 和 各 种 结果 报告 的 生成 。 

(2) 实现 自动 化 的 可 靠 性 测试 和 单元 测试 

IBM Rational 软件 测试 工具 PurifyPlus 主要 用 于 单元 测试 和 可 靠 性 测试 。 
PurifyPlus 包含 Rational Purify,Quantify 和 PureCoverage 三 个 产品 。 

Rational Purify 主要 针对 软件 开发 过 程 中 难以 发 现 的 内 存 错误 和 运行 时 的 错误 。 它 
能 在 软件 的 开发 过 程 中 自动 地 发 现 错误 ,准确 地 定位 错误 ,提供 完备 的 错误 信息 ,从 而 减 
少 了 调试 时 间 , 帮助 开发 团队 找 出 缺陷 并 最 终 形成 高 质量 的 产品 。 

Rational Quantify 主要 解决 软件 开发 过 程 中 的 性 能 问题 。 它 能 在 软件 开发 过 程 中 方 
便 地 查 明 并 显示 应 用 程序 的 性 能 瓶颈 ,从 而 确保 整个 应 用 程序 的 质量 和 性 能 。Rational 
Quantify 给 开发 团队 提供 了 一 个 性 能 数据 的 全 局 图 形 化 视图 ,使 他 们 从 开发 流程 的 开始 
时 就 注重 性 能 问题 。 

Rational PureCoverage 提供 应 用 程序 的 测试 覆盖 率 信息 。 在 软件 开发 过 程 中 , 它 能 
自动 找 出 代码 中 未 经 测试 的 代码 ,保证 代码 测试 覆盖 率 ; 帮助 开发 人 员 确 保 开 发 质量 ,并 
使 质量 保证 人 员 能 够 评价 测试 工作 的 效果 ;还 可 针对 每 次 测试 生成 全 面 的 覆盖 率 报告 ,可 
以 归并 程序 多 次 运行 所 生成 的 覆盖 数据 ,自动 比较 测试 结果 以 评估 测试 进度 。 

在 回归 测试 中 ,Rational Purify,Quantify 和 PureCoverage 通常 与 Robot 结合 使 用 ， 
以 完成 特定 的 功能 。 

(3) 实现 实时 系统 的 自动 化 测试 

IBM Rational Test RealTime 主要 适合 于 开发 实时 系统 和 具有 和 较 高 要 求 的 非 实时 系 
统 的 软件 开发 ,可 以 帮助 测试 团队 快速 建立 单元 测试 、 集 成 测试 、 系 统 测试 等 测试 能 力 。 
它 提供 的 自动 测试 (包括 单元 测试 、 集 成 测试 、 系 统 测试 ) 代码 覆盖 内存 泄漏 检查 .性 能 
分 析 及 UML 跟踪 等 重要 特性 ,帮助 软件 测试 团队 在 系统 崩溃 前 发 现 并 修复 软件 缺陷 。 
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其 主要 功能 特性 如 下 : 
通过 源 代码 分 析 , 自 动 生成 在 目标 上 运行 所 需 的 测试 脚本 和 测试 程序 。 除 了 利用 
测试 脚本 指定 测试 数据 外 ,不 需要 手工 编码 。 而 且 在 测试 报告 中 ,测试 结果 与 源 


代码 相 联 ,简化 了 代码 修改 。 

。 通过 代码 自动 插 桩 进行 代码 覆盖 率 、 内 存 泄 漏 及 性 能 瓶颈 进行 分 析 , 并 与 测试 用 
例 建 立 关联 。 

。 通 过 把 测试 结果 和 观察 结果 与 被 测 代码 关联 ,把 测试 作为 开发 的 一 个 重要 部 分 ， 
实现 开发 ,测试 .评估 的 同步 。 


利用 通用 的 、 低 开销 而 且 易 于 移植 的 目标 适 配 技 术 (Target Deployment Port， 
TDP) ,使 得 测试 与 编译 器 .连接 器 .调试 器 及 目标 结构 无 关 , 从 而 实现 了 跨 多 开发 
环境 .多 目标 结构 。 
利用 UML Trace 功能 观察 应 用 运行 状态 ,并 通过 状态 机 模型 覆盖 实现 测试 用 例 
与 模型 的 关联 ,充分 利用 了 模型 和 代码 级 测试 的 长 处 。 
与 ClearCase,ClearQuest 和 RUP 集成 ,在 同一 集成 环境 中 完成 对 测试 文件 进行 
版 本 控制 ,提交 和 修改 变更 请 求 。 
9.5.3 HP Mercury 软件 自动 化 测试 解决 方案 

HP Mercury 公司 是 全 球 应 用 实施 领域 的 领导 者 ,为 企业 自动 化 测试 提供 了 一 整套 
解决 方案 。 

HP Mercury 的 应 用 实施 产品 率先 提供 了 以 业务 为 中 心 的 生命 周期 方法 ,用 于 优化 
预 生 产 期 间 的 质量 和 性 能 。 测 试 和 开发 人 员 可 以 制定 更 加 明智 的 “投入 使 用 "决策 ,减少 
软件 缺陷 ,节省 部 署 新 软件 或 软件 升级 所 耗费 的 时 间 和 成 本 ,同时 确保 应 用 程序 随时 都 能 
提供 预期 的 业务 功能 。 

Mercury Quality Center 提供 在 各 种 IT 及 应 用 程序 环境 下 的 自动 化 软件 测试 和 质 
量 保证 。 而 Mercury Performance Center 率先 提供 了 生命 周期 方法 ,可 以 优化 应 用 程序 
性 能 ,帮助 确保 应 用 程序 能 够 扩展 支持 一 定数 量 的 用 户 .事务 处 理 量 和 性 能 水 平 。 

对 Mercury Quality Center 和 Mercury Performance Center 中 最 重要 的 测试 工具 可 
以 进行 如 下 分 类 : 测试 管理 工具 TestDirector, 性 能 测试 工具 LoadRunner, 功 能 测试 工具 
QuickTest Professional 和 WinRunner。 


1. 测试 管理 工具 TestDirector 

TestDirector 是 业界 第 一 个 基于 Web 的 测试 管理 系统 , 它 使 得 在 公司 内 部 或 外 部 进 
行 全 球 范围 内 的 测试 管理 成 为 可 能 。 

TestDirector 通过 单一 浏览 器 操作 界面 登录 和 使 用 ,并 支持 组 织 机 构 间 的 协同 作业 。 
它 向 测试 人 员 、 开 发 人 员 及 其 他 相关 人 员 提 供 了 一 个 包含 所 有 测试 信息 的 中 央 数 据 仓库 
和 访问 数据 仓库 时 的 统一 界面 ,使 各 类 人 员 在 不 同 的 地 方 就 能 交互 测试 信息 ,执行 测试 活 
动 , 消 除了 组 织 机 构 间 、 地 域 间 的 障碍 。 

TestDirector 可 以 集成 Mercury 测试 工具 (WinRunner, QuickTest Professional， 
QuickTest Professional for MySAP. com Windows Client, LoadRunner 和 Visual 
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APIXP) 以 及 第 三 方 和 自 定义 测试 工具 .需求 和 配置 管理 工具 ,可 以 无 锋 地 与 所 选择 的 测 
试 工具 通信 ,提供 一 种 完整 的 解决 方案 ,使 应 用 程序 测试 完全 自动 化 。 

TestDirector 将 测试 过 程 流 水 化 ,通过 一 个 整体 的 应 用 系统 集成 了 测试 管理 的 各 个 
部 分 ,包括 需求 管理 ,测试 计划 测试 安排 及 执行 缺陷 管理 等 核心 模块 。 

使 用 TestDirector, 项 目 组 中 的 各 类 人 员 就 可 以 围绕 统一 的 测试 流程 各 司 其 职 , 例 如 
业务 分 析 人 员 定 义 应 用 需求 和 测试 目标 ;测试 经 理 和 项 目 主 管制 定 测试 计划 ,并 开发 测试 
案例 ;测试 自动 化 工程 师 创 建 自动 化 的 脚本 ,并 将 脚本 保存 于 存储 器 ;SQA 测试 人 员 运 行 
手动 测试 和 自动 测试 ,汇报 执行 结果 ,并 输入 缺陷 ;开发 人 员 登 录 数 据 库 中 检查 并 修复 缺 
陷 ; 项 目 经 理 创 建 应 用 状态 报告 ,并 管理 资源 的 分 配 情况 ;产品 经 理 对 应 用 发 布 的 就 绪 状 
况 做 出 决策 。 

TestDirector 使 得 在 软件 发 布 和 项 目 审核 过 程 中 节省 大 量 的 时 间 。 它 可 以 避免 项 目 
组 中 处 于 不 同位 置 的 各 类 人 员 的 重复 劳动 ,测试 数据 损失 和 沟通 不 良 等 问题 。 另 外 ， 
TestDirector 还 可 以 帮助 QA 团队 制定 长 期 目标 ,短期 目标 ,以 及 确定 应 用 程序 是 否 准备 
就 绪 的 标准 。 

下 面 简要 介绍 TestDirector 的 功能 模块 。 

(1) 需求 管理 

TestDirector 的 Web 界面 简化 了 需求 管理 的 过 程 ,提供 了 一 个 较 直 观 的 机 制 将 测试 
计划 ,测试 案例 和 应 用 功能 需求 联系 起 来 。 需 求 管理 还 能 很 好 地 处 理 需 求 变更 的 情况 ,能 
及 时 根据 需求 的 变更 调整 测试 计划 。 

TestDirector 的 需求 管理 保证 了 整个 测试 流程 的 统一 ,确保 了 上 线 应 用 能 够 满足 用 
户 的 最 终 需 要 。 

(2) 计划 测试 

TestDirector 的 Test Plan Manager 通过 直观 的 结构 帮助 测试 人 员 将 应 用 需求 转化 
为 具体 的 测试 计划 。 

Test Plan Manager 提供 了 多 种 方式 建立 完整 的 测试 计划 ,例如 : 

。 直接 建立 计划 。 

。 根据 用 Requirements Manager 所 定义 的 应 用 需求 ,通过 Test Plan Wizard 快捷 地 

生成 测试 计划 。 

。 若 已 经 将 计划 信息 储存 于 Microsoft Word 或 Excel 中 ,可 将 其 导入 到 Test Plan 

Manager。 

Test Plan Manager 还 能 进一步 地 帮助 测试 人 员 完 善 测试 设计 和 以 文件 形式 描述 每 
一 个 测试 步骤 。 它 还 能 为 每 一 项 测试 建立 附属 文件 ,例如 Word,Excel, HTML, 以 更 详 
尽 地 描述 测试 计划 。 

TestDirector 还 能 简化 将 人 工 测试 切换 到 自动 测试 脚本 的 过 程 。 
建立 的 所 有 测试 计划 都 存放 在 一 个 中 央 存 储 器 中 ,可 通过 可 折 又 式 目录 树 可 以 方便 
地 进行 查看 , 且 使 测试 小 组 可 以 便捷 地 重复 使 用 测试 计划 和 独立 的 测试 案例 ,用 于 未 来 的 
应 用 发 布 。 
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(3) 安排 和 执行 测试 

Test Lab Manager 允许 既定 测试 在 无 人 操作 的 情况 下 不 间断 地 运行 ,或 者 在 系统 处 
于 最 低 资 源 需 求 的 状态 下 运行 , 且 可 将 所 有 测试 结果 保存 在 中 央 存 储 器 中 。 通 过 定义 不 
同 测试 间 的 依赖 关系 ,测试 人 员 可 以 逼真 地 模拟 真实 的 业务 流程 ,同时 更 方便 地 维护 和 重 
复 使 用 测试 案例 。 

(4) 缺陷 管理 

TestDirector 的 Defect Manager 支持 整个 缺陷 生命 周期 一 一 从 初始 问题 发 现 ,直至 
缺陷 修复 和 验证 修复 ,这 确保 了 缺陷 在 定位 之 前 不 会 被 忽视 。 在 任何 新 的 缺陷 被 提交 之 
前 ,TestDirector 会 检查 数据 库 以 发 现 相似 的 缺陷 ,最 大 限度 地 减少 重复 缺陷 ,并 消除 了 
手动 检查 的 需要 。 

(5) 图 形 化 和 报表 输出 

TestDirector 的 图 形 化 和 报表 输出 功能 ,能 够 在 测试 的 任 一 环节 帮助 测试 人 员 对 数据 信 
息 进行 分 析 , 能 以 标准 的 HTML 或 Word 形式 快速 地 生成 正式 测试 报告 ,测试 分 析 数 据 还 
可 简便 地 输入 到 一 种 工业 标准 化 的 报告 工具 ,如 Excel, ReportSmith,CrystalReports 及 其 
他 类 型 的 第 三 方 工 具 。 测 试 报告 有 利于 项 目 组 对 应 用 状态 做 出 决策 。 


2. 功能 测试 工具 WinRunner 

WinRunner 是 企业 级 功能 测试 工具 。 通 过 自动 录制 .检测 和 回放 用 户 等 应 用 操作 ， 
WinRunner 能 够 有 效 地 帮助 测试 人 员 对 复杂 的 企业 级 应 用 的 不 同 发 布 版 本 进行 测试 , 确 
保 跨 平台 的 .复杂 的 企业 级 应 用 能 够 成 功 地 发 布 。 

WinRunner 的 最 大 特点 是 能 快速 ,批量 地 完成 针对 功能 点 的 测试 ,因此 十 分 有 利于 
回归 测试 。 

此 外 ,WinRunner 支持 程序 风格 的 测试 脚本 ,高 水 平 的 测试 人 员 可 通过 对 脚本 编程 
建立 流程 复杂 功能 强大 的 测试 , 且 能 实现 对 测试 脚本 的 重用 。 

针对 大 多 数 编程 语言 和 Windows 技术 , WinRunner 提供 了 较 好 的 集成 ,支持 环境 ， 
因而 适合 于 基于 Windows 平台 的 应 用 程序 的 功能 测试 。 

对 于 WinRunner, 将 在 9.6 节 中 更 详细 地 介绍 。 


3. 功能 测试 工具 QuickTest Professional 

QuickTest Professional(QTP) 是 基于 Web 的 企业 级 自动 化 功能 测试 工具 。 它 为 每 
一 个 重要 软件 应 用 和 环境 提供 功能 和 回归 测试 自动 化 的 行业 最 佳 解决 方案 。 

与 WinRunner 相 比 .QTP 侧重 于 测试 B/S 架构 ,而 WinRunner 侧重 于 测试 C/S 哥 
构 的 软件 。 

下 面 介 绍 QuickTest Professional 的 工作 流程 。 

(1) 创建 测试 

用 QuickTest Professional 创立 一 个 测试 , 只 需 记 录 下 一 个 标准 的 业务 流程 , 例如 下 
一 张 订单 或 建立 一 个 新 的 商家 账户 。QuickTest Professional 直观 的 记录 流程 能 让 任何 
人 在 GUI 上 通过 点 击 鼠 标 就 可 建立 完整 的 测试 ;也 可 以 编辑 测试 指令 来 建立 复杂 的 测 
试 。QuickTest Professional 将 两 种 测试 创建 方式 结合 在 一 个 环境 中 ,用 户 可 根据 企业 自 
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身 情 况 选 用 。 

(2) 插入 检查 点 

在 记录 一 个 测试 的 过 程 中 ,可 在 需要 检查 应 用 程序 反应 的 地 方 插入 检查 点 。 通 过 检 
查 点 来 检查 GUI 对 象 、 位 图 及 数据 库 。 在 这 个 过 程 中 ,QuickTest Professional 捕捉 数 
据 , 并 作为 期 望 结果 储存 下 来 , 供 以 后 进行 验证 。 

(3) 检验 数据 

除了 创立 并 运行 测试 , QuickTest Professional 还 能 验证 数据 库 的 数值 ,从 而 确保 交 
易 的 准确 性 。 例 如 ,在 测试 创建 时 ,可 设 定 哪些 数据 库 表 格 和 记录 资料 需要 检测 。 在 重 放 
时 ,测试 程序 就 会 核对 数据 库 内 的 实际 数值 与 预想 的 数值 。QuickTest Professional 能 自 
动 显示 检测 结果 ,在 有 修改 、 删 除 或 插入 的 记录 上 用 突出 标识 以 引起 注意 。 

(4) 增强 测试 

与 WinRunner 相似 ,QuickTest Professional 的 数据 驱动 向 导 (Data Driver Wizard) 
使 其 用 户 能 通过 简单 地 使 用 鼠标 将 一 个 记录 下 的 业务 流程 转化 为 一 个 数据 驱动 测试 。 

针对 相当 数量 的 企业 应 用 中 的 非 标准 对 象 ,QuickTest Professional 的 虚拟 对 象 向 导 
(Virtual Object Wizard) 能 识别 以 前 未 知 的 对 象 , 不 必 特 别 编写 代码 ,从 而 提高 测试 脚本 
的 可 读 性 和 测试 质量 。 

(5) 运行 测试 

创建 测试 并 插入 检查 点 ,添加 一 定 的 功能 后 ,就 可 执行 测试 。QuickTest Professional 
执行 测试 时 , 它 会 自动 操作 应 用 程序 ,正如 一 个 真实 用 户 根 据 记 录 流 程 执行 每 一 步 的 操 
作 。 而 且 , 它 的 意外 处 理 功 能 为 测试 排除 干扰 ,包括 消息 和 警报 。 

(6) 分 析 结果 

测试 运行 后 应 对 测试 结果 进行 分 析 。QuickTest Professional 的 互动 式 报告 工具 能 
够 提供 详尽 的 、 易 读 的 报告 , 列 出 在 测试 中 发 现 的 差错 和 出 错 的 位 置 ,帮助 对 所 得 的 结果 
进行 分 析 。 点 击 按钮 ,还 能 进一步 获取 任何 未 被 包括 在 此 测试 范围 内 的 错误 的 详尽 资料 。 

(7) 维护 测试 

每 当 应 用 程序 被 更 改 后 ,就 应 对 其 进行 测试 。 有 了 QuickTest Professional, 则 不 必 
应 用 程序 每 改动 一 次 ,就 建立 新 的 测试 。QuickTest Professional 会 帮助 测试 人 员 创 立 在 
程序 应 用 周期 内 可 重复 使 用 的 测试 ,因而 极 大 地 节省 了 测试 时 间 和 资源 。 


4. 负载 测试 工具 LoadRunner 

LoadRunner 是 业界 领先 的 预测 系统 行为 和 性 能 的 负载 测试 工具 。 它 通过 模拟 成 千 
上 万 名 实际 用 户 和 员工 的 行为 并 进行 实时 性 能 监测 ,对 企业 的 应 用 系统 进行 测试 ,发 现 并 
精确 定位 整个 企业 架构 中 存在 的 问题 。 通 过 使 用 LoadRunner. 企 业 能 最 大 限度 地 缩短 测 
试 周期 ,优化 系统 性 能 ,并 加 速 应 用 系统 的 部 署 时 间 。 此 外 ,LoadRunner 支持 最 广泛 的 
协议 标准 和 技术 ,可 以 为 企业 特定 的 应 用 环境 量 身 订 制 解决 方案 。 

LoadRunner 的 主要 功能 和 特征 如 下 。 

(1) 轻松 创建 虚拟 用 户 

使 用 LoadRunner 的 Virtual User Generator ,能 方便 地 创建 系统 负载 。 该 引擎 能 够 
生成 agent 或 虚拟 用 户 模拟 业务 流程 和 真正 用 户 的 操作 行为 ,方法 是 先 记 录 业 务 流程 (如 
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下 订单 或 机 票 预定 ) ,然后 将 其 转化 为 测试 脚本 。 利 用 虚拟 用 户 , 可 在 安装 了 Windows， 
UNIX 或 Linux 系统 的 机 器 上 同时 产生 成 千 上 万 个 用 户 访问 量 , 因 而 极 大 减少 了 负载 测 
试 所 需 硬 件 和 人 力 资源 。 

另外 ,利用 LoadRunner 的 TurboLoad 专利 技术 可 以 获得 最 高 适应 性 水 平 ,因为 
TurboLoad 能 够 帮助 测试 人 员 建 立 每 天 与 数 十 万 在 线 用 户 和 数 以 百 万 计 的 点 击 数 相 匹 
配 的 负荷 量 。 

用 Virtual User Generator 建立 测试 脚本 后 ,可 通过 Data Wizard 自动 实现 其 测试 数 
据 的 参数 化 。Data Wizard 直接 连接 数据 库 服务 器 ,从 中 获取 所 需 数 据 并 直接 输入 到 测试 
脚本 。 从 而 利用 不 同 的 实际 发 生 数据 测试 应 用 程序 ,反映 出 系统 的 负载 能 力 。 

利用 LoadRunner 也 可 以 控制 某 些 行为 特性 ,以 进一步 确认 能 够 模拟 真实 用 户 , 例 如 
控制 交易 的 数量 交易 频率 .用 户 的 思考 时 间 和 连接 速度 等 。 

(2) 创建 切实 可 行 的 负载 方案 
建立 起 虚拟 用 户 之 后 ,就 需要 制定 切实 可 行 的 负载 方案 , 即 确定 在 每 一 个 负载 服务 器 
上 运行 的 业务 流程 和 数量 的 实际 用 户 。 用 LoadRunner 的 Controller ,能 方便 地 组 织 起 多 
用 户 的 测试 方案 。Controller 的 Rendezvous 功能 提供 了 一 个 互动 的 环境 ,在 其 中 既 能 建 
立 起 持续 且 循 环 的 负载 ,又 能 管理 和 驱动 负载 测试 方案 。 

利用 其 日 程 计划 服务 可 以 将 测试 过 程 自动 化 。 此 外 ,LoadRunner 通过 其 AutoLoad 
技术 还 提供 了 更 多 的 测试 灵活 性 。 使 用 AutoLoad, 可 以 根据 目前 的 用 户 人 数 事 先 设 定 测 
试 目标 ,优化 测试 流程 。 

(3) 定位 性 能 问题 

LoadRunner 内 含 集成 的 实时 监测 器 ,使 得 在 负载 测试 过 程 中 ,可 以 随时 观察 到 应 用 
系统 的 运行 性 能 。 这 样 ,就 可 以 在 测试 过 程 中 从 客户 和 服务 器 的 双方 面 评估 这 些 系统 组 
件 的 运行 性 能 ,从 而 更 快 地 发 现 问题 。 

此 外 ,利用 LoadRunner 的 ContentCheck, 可 以 判断 负载 下 的 应 用 程序 功能 是 否 正 
常 。ContentCheck 在 虚拟 用 户 运 行 时 ,检测 应 用 程序 的 网 络 内 容 ,从 中 确定 是 否 有 错误 
内 容 传 送出 去 。 它 的 实时 浏览 器 提供 了 一 个 从 终端 用 户 角 度 观 察 到 的 程序 性 能 情况 。 

(4) 分 析 结 果 以 精确 定位 问题 

测试 完毕 ,LoadRunner 收集 汇总 所 有 测试 数据 ,并 能 提供 高 级 的 分 析 和 报告 工具 ， 
以 便 迅速 查找 到 性 能 问题 并 精确 定位 。 使 用 LoadRunner 的 Web 交易 细节 监测 器 ,可 以 
了 解 将 所 有 图 像框 架 和 文本 下 载 到 每 一 网 页 上 所 需要 的 时 间 。 另 外 , Web 交易 细节 监 
测 器 分 解 用 于 客户 端 .网 络 和 服务 器 上 端 到 端的 反应 时 间 ,便于 确认 问题 ,定位 查找 真正 
出 错 的 组 件 。 例 如 可 将 网 络 延 时 进行 分 解 , 以 判断 DNS 解析 时 间 ,连接 服务 器 或 SSL 认 
证 所 花费 的 时 间 。 

(5) 重复 测试 保证 系统 发 布 的 高 性 能 

负载 测试 是 一 个 重复 过 程 。 每 次 处 理 完 一 个 出 错 情况 ,都 需要 对 应 用 程序 在 相同 的 
方案 下 再 进行 一 次 负载 测试 ,以 验证 所 做 的 修正 是 否 改善 了 运行 性 能 。 

(6) Enterprise Java Beans 的 测试 

LoadRunner 完全 支持 EJB 的 负载 测试 。 这 些 基于 Java 的 组 件 运 行 在 应 用 服务 器 
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上 ,提供 广泛 的 应 用 服务 。 通 过 测试 这 些 组 件 , 可 以 在 应 用 程序 开发 的 早期 就 确认 并 解决 
可 能 产生 的 问题 。 

利用 LoadRunner 可 以 方便 地 了 解 系统 性 能 。 它 的 Controller 允许 重复 执行 相同 的 
测试 方案 ;基于 HTML 的 报告 能 提供 一 个 比较 性 能 结果 所 需 的 基准 ,以 此 衡量 在 一 段 时 
间 内 ,有 多 大 程度 的 改进 并 确保 应 用 成 功 。 

(7) 最 大 化 投资 回报 

所 有 HP Mercury 的 产品 和 服务 都 是 集成 设计 的 , 能 完全 相 容 地 一 起 运作 。 由 于 测 
试 脚本 具有 相同 的 核心 技术 ,都 是 来 自 于 LoadRunner 和 Mercury 主动 负载 测试 服务 
ActiveTest 的 ,所 以 它们 可 以 被 重复 用 于 性 能 监测 。 借 助 于 Mercury 的 监测 方案 、Topaz 
和 ActiveWatch, 通 过 重复 利用 测试 脚本 ,可 以 平衡 投资 收益 , 且 能 为 测试 前 期 部 署 和 实 
时 监测 获取 一 个 全 面 的 应 用 性 能 管理 解决 方案 。 

(8) 支持 无 线 应 用 协议 

随 着 无 线装 置 数 量 和 种 类 的 增多 ,测试 计划 需要 同时 满足 传统 的 基于 浏览 器 的 用 户 
和 无 线 互联 网 设备 ,如 手机 和 个 人 数字 式 助 手 。LoadRunner 支持 两 项 最 广泛 使 用 的 协 
议 一 一 无 线 应 用 协议 (WAP) 和 商务 模式 (i-mode)。 此 外 ,对 整个 从 入 口 到 网 络 服务 器 架 
构 进 行 负载 测试 ,只 需要 通过 记录 一 次 脚本 ,就 可 以 完成 无 线 互 联网 系统 的 测试 。 

(9) 支持 Media Stream 应 用 

LoadRunner 还 能 支持 流 媒体 (Media Stream) 应 用 。 为 了 保证 终端 用 户 得 到 良好 的 
操作 体验 和 高 质量 流动 ,需要 对 流 媒 体 应 用 程序 进行 检测 。 使 用 LoadRunner, 可 以 记录 
和 重 放任 何 现代 流行 的 多 媒体 数据 流 格 式 , 以 此 诊断 系统 的 性 能 问题 ,分 析 流 应 用 的 
质量 。 

(10) 完整 的 企业 应 用 环境 的 支持 

LoadRunner 支持 广泛 的 协议 ,可 以 测试 各 种 IT 基础 架构 。 


9.6 使 用 WinRunner 进行 功能 测试 


9.6.1 WinRunner 简介 


1. 启动 WinRunner 

单 击 WinRunner 8.0 的 桌面 图 标 ( 本 节 以 WinRunner 8.0 为 例 讲解 WinRunner 及 
其 使 用 ) ,或 在 “程序 ”菜单 中 选中 WinRunner 8.0, 可 以 启动 WinRunner, 如 图 9-3 所 示 。 
WinRunner 启动 时 的 界面 如 图 9-4 所 示 。 


图 9-3 WinRunner 8. 0 开始 菜单 
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图 9-4 ” WinRunner 8.0 启动 界面 


然后 就 会 出 现 WinRunner Add-in Manager( 持 件 管理 器 ) 对 话 框 供用 户 加 载 插件 ,如 
图 9-5 所 示 。 在 插件 管理 器 中 ,可 选择 支持 ActiveX Controls,PowerBuilder, Visual Basic 
或 WebTest 插件 ,其 他 插件 则 需 向 MI 公司 购买 。 建 议 在 此 不 要 选择 所 有 插件 ,因为 这 
样 可 能 会 对 录制 或 执行 脚本 造成 不 良 影响 。 


图 9-5 WinRunner 的 插件 管理 器 


若 不 选中 Show on startup 复 选 框 , 则 在 启动 时 此 界面 不 再 出 现 。 也 可 以 在 进入 
WinRunner 后 在 Tools 菜单 General Options 级 联 菜单 中 再 选择 Startup 选项 ,在 其 中 进 
行 设 置 ,以 决定 是 否 在 启动 WinRunner 时 显示 插件 管理 器 界面 并 显示 时 间 。 


2. WinRunner 主 界面 

启动 WinRunner 后 ,进入 WinRunner 主 界面 ,在 主 界面 File 菜单 中 选择 Open 选 
项 , 即 可 打开 一 个 已 有 的 测试 ,或 单 击 New 选项 新 建 一 个 测试 。 单 击 New 选项 新 建 一 个 
测试 后 ,将 进入 如 图 9-6 所 示 主 界面 。 


pa 软件 测试 
文件 工具 栏 人 泛 并 兴 柱 有 村 用 户 工具 栏 


状态 栏 工作 窗口 
图 9-6 WinRunner 主 界面 


3. WinRunner 主 界面 各 组 成 部 分 介绍 

(1) 标题 栏 

标题 栏 显 示 了 目前 正在 编辑 的 测试 。 

(2) 主 菜单 

菜单 中 包含 了 WinRunner 的 所 有 功能 。 

(3) 工具 栏 

在 WinRunner 主 界面 中 的 工具 栏 如 下 : 

。“ 文 件 ” 工 具 栏 。 通 过 工具 栏 中 的 工具 ,可 以 新 建 . 打 开 、 保 存 和 打印 测试 文件 , 设 
置 测 试 属性 ,查看 测试 结果 ,查看 帮助 。 

。“ 调 试 ? 工 具 栏 。 通 过 工具 栏 中 的 工具 可 以 调试 测试 脚本 。 

。 “测试 ?工具 栏 。 通 过 工具 栏 中 的 工具 ,可 以 选择 运行 模式 ,以 不 同方 式 录制 脚本 ， 
运行 脚本 等 。 

。“ 用 户 ” 工 具 栏 。 工 具 栏 中 包含 创建 测试 时 常用 的 命令 ,用 户 可 对 其 进行 定制 。 

(4) 工作 窗口 

工作 窗口 用 于 显示 当前 正在 录制 或 编辑 的 脚本 ,如 图 9-7 所 示 。 

(5) 状态 栏 

状态 栏 位 于 WinRunner 主 界面 的 底部 ,显示 出 当前 的 运行 状态 或 所 选择 的 命令 。 


4. WinRunner 测试 模式 
在 WinRunner 中 ,使 用 录制 脚本 的 方式 生成 测试 时 ,包括 上 下 文 相关 模式 (Context 
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# Flight Reservation 
set_window (“Flight Reservation”, 4); 
menu_select_iten (“File:Open Order...”); 


了 Open Order 
set_window (“Open Order”, 2); 
button_set (“Order No.”, ON): 
edit_set ("Edit_1", “4"); 
button_press ("OK"); 


# Flight Reservation 
set_window ("Flight Reservation”, 3); 
menu_select_iten (‘File:Fax Order...”); 


天 Far Drder Wo. 4 
set_window ("Fax Order No. 4”, 1); 
edit_get_text("# Tickets:", tickets) ; 
edit_get_text ("Ticket Price:”,price): 
edit_get_text ("Total:", totals) ; 
TO 
if (tickets#price==totals) 
tl_step("Verify totals’, 0, “The totals field is OK.”); 
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图 9-7 WinRunner 工作 窗口 


图 9-8 使 用 上 下 文 相关 模式 


Sensitive mode) 和 模拟 模式 (Analog mode) 两 种 录制 测试 的 模式 ,如 图 9-8 所 示 。 


(1) 上 下 文 相 关 模 式 


在 该 模式 下 ,WinRunner 能 够 识别 每 个 用 户 点 击 的 GUI 对 象 (例如 窗口 .按钮 或 列 
表 ) 和 执行 的 操作 (如 拖 放 、 单 击 或 选择 ) ,并 忽略 这 些 对 象 在 屏幕 上 的 物理 位 置 。 用 户 对 
被 测 软件 进行 的 每 一 次 操作 ,都 会 被 WinRunner 记录 下 来 ,保存 在 测试 脚本 中 。 脚 本 语 
言 描述 了 用 户 选 取 的 对 象 和 操作 动作 。 当 用 户 录制 脚本 时 , WinRunner 会 对 用 户 选取 的 
每 个 对 象 进行 唯一 描述 ,并 写 人 GUI map( 映 射 ) 文 件 中 。 在 WinRunner 中 :GUI map 文 
件 和 测试 脚本 被 分 开 保存 并 维护 。 这 样 , 当 软 件 界面 发 生变 化 时 ,只 需 更 新 GUI map 文 
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件 即 可 。 所 以 ,基于 上 下 文 相关 的 测试 脚本 非常 容易 实现 重用 。 执 行 测试 只 需要 运行 测 
试 脚本 即 可 ,通过 运行 测试 脚本 ,WinRunner 可 以 模拟 用 户 的 操作 步 又 来 运行 被 测 软 件 。 
WinRunner 会 自动 从 GUI map 中 读 取 对 象 描述 ,并 在 被 测 软件 中 查找 符合 这 些 描述 的 
对 象 ,这些 对 象 在 窗口 位 置 中 的 变化 不 会 影响 WinRunner 的 查找 。 由 此 可 见 , 上 下 文 相 
关 模 式 是 以 记录 动作 为 目标 的 录制 模式 。 

(2) 模拟 模式 

这 种 模式 是 以 记录 鼠标 轨迹 和 键盘 操作 为 目标 的 录制 模式 。 在 该 模式 下 ， 
WinRunner 能 够 记录 鼠标 点 击 、 键 盘 输 入 和 鼠标 在 二 维 平 面 上 的 精确 运动 轨迹 。 这 种 模 
式 对 于 那些 需要 追踪 鼠标 运动 的 测试 非常 有 用 ,如 绘图 软件 等 。 
9.6.2 WinRunner 测试 流程 

WinRunner 的 测试 流程 大 致 包括 6 个 步骤 : 创建 GUI map 文件 .创建 测试 脚本 、 调 
试 脚本 .运行 测试 .检查 测试 结果 和 提交 缺陷 。 


1. 创建 GUI map 文件 

在 WinRunner 中 ,可 以 通过 GUI map 文件 识别 被 测试 应 用 程序 中 的 GUI 对 象 。 一 
般 可 以 使 用 两 种 方式 创建 GUI map 文件 ,一 种 是 使 用 RapidTest Script Wizard 来 自动 学 
习 对 象 ,用 它 产生 GUI map 文件 ; 另 一 种 是 在 录制 脚本 时 ,通过 用 户 单 击 对 象 ,由 
WinRunner 捕捉 对 象 的 描述 ,并 将 其 加 入 GUI map 文件 中 。 

启动 RapidTest Script Wizard 的 方法 如 图 9-9 所 示 。 如 果 选 择 了 第 二 种 方式 创建 
GUI map 文件 ,实际 上 可 以 直接 进入 到 步骤 2( 创 建 测 试 脚 本 )。 由 此 可 见 ,在 使 用 
WinRunner 进行 测试 时 ,首先 要 确定 GUI map 文件 的 创建 方式 。 


9-9 启动 RapidTest Script Wizard 
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需要 注意 的 是 ,如 果 在 WinRunner 的 General Options 对 话 框 中 的 GUI map file 
mode 选项 区 中 选中 GUI map file per test 单 选 按钮 ( 单 击 Tools 菜单 的 General Options 
选项 ) ,如 图 9-10 所 示 ;或 者 选择 WebTest 插件 ( 单 击 File 菜单 的 Test Properties 选项 )， 
如 图 9-11 所 示 ,那么 在 图 9-9 中 ,RapidTest Script Wizard 菜单 项 就 不 会 出 现 。 
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9-11 插件 设置 窗口 


2. 创建 测试 脚本 

测试 脚本 的 创建 有 录制 和 编程 两 种 方式 ,或 者 两 者 的 组 合 。 在 录制 测试 脚本 时 ,可 以 
在 用 户 想 要 检查 被 测试 应 用 程序 响应 的 地 方 插入 检查 点 (Checkpoint) ,以 确定 程序 是 否 
能 够 正确 地 运行 。 这 些 检 查 点 包括 GUI 对 象 检 查 点 、 图 像 检 查 点 ,数据库 检查 点 和 文本 
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检查 点 。 

3. 调试 脚本 

在 运行 测试 脚本 前 ,将 运行 模式 设置 为 调试 运行 模式 (Debug Run mode) ,可 以 对 测 
试 脚本 进行 调试 ,如 图 9-12 所 示 。 通 过 调试 ,可 以 比较 精确 地 查找 到 出 现 错误 的 位 置 。 
在 实际 测试 过 程 中 ,可 以 使 用 WinRunner 提供 的 Step, Step into, Step out 功能 调试 
脚本 。 


Flight Reservation”, 4): 
liten (“File;Open Order,..”) 


# Open Order 
set_window (“Open Order”, 2); 
button_set (“Order No.”, ON); 
edit_set ("Edit_1", "4"); 
button_press ("OR"); 


出 

2 Flight Reservation 

3 set_windov (Flight Reservation”, 3); 
nenu_select_iten ("File:Fax Order...”); 


15 
z Far Order No. 4 
set _window ("Fax Order No. 4”, 1):; 
edit_get_text ("# Tickets:”, tickets) 
edit_get_text ("Ticket Price:”,price); 
edit_get_text ("Total:”, totals) ; 
了 
证 (ticketseprice==totals) 
tl_step("Verify totals"，0,“The totals field is OK ): 
else 
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图 9-12 设置 调试 运行 模式 


4. 运行 测试 

在 运行 测试 脚本 前 ,将 运行 模式 设置 为 验证 运行 模式 (Verify Run mode), 即 可 运行 
脚本 来 测试 应 用 程序 。 当 WinRunner 在 运行 中 遇 到 检查 点 时 ,会 将 被 测 应 用 程序 中 的 当 
前 数据 与 以 前 捕捉 的 期 望 数 据 进行 比较 ,不 论 发 现任 何不 匹配 , WinRunner 都 会 将 目前 
情况 捕捉 下 来 作为 真实 的 结果 。 

5. 检查 测试 结果 

每 次 测试 脚本 运行 结束 后 ,WinRunner 将 会 执行 结果 显示 在 报告 中 。 该 报告 描述 所 
有 在 运行 中 所 遇 到 的 重要 事件 ,例如 检查 点 、 错 误 信息 .系统 信息 或 是 用 户 信息 。 如 果 发 
现在 运行 中 有 任何 不 匹配 的 检查 点 ,可 以 在 测试 结果 窗口 中 查看 期 望 的 和 实际 的 结果 ,如 
图 9-13 所 示 。 

6. 提交 缺陷 


如 果 一 个 测试 脚本 是 由 于 所 测试 应 用 程序 中 的 缺陷 而 导致 执行 失败 的 ,可 以 直接 从 
测试 结果 窗口 中 提取 缺陷 的 相关 信息 。 
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图 9-13 测试 结果 窗口 


9.6.3 GUI Map 

在 讲解 使 用 WinRunner 创建 测试 项 目 之 前 ,首先 介绍 WinRunner 中 的 GUI Map 
(图 形 用 户 接口 映射 ) 。 通 常 , Windows 应 用 程序 是 由 窗口 .按钮 .菜单 .Text Edit 等 组 件 
构成 ,在 WinRunner 中 这 些 组 件 称 为 GUI 对 象 (GUI object) 。WinRunner 能 在 录制 脚 
本 或 使 用 专用 程序 (例如 GUI SPY) 的 过 程 中 ,通过 这 些 GUI 对 象 的 属性 如 Class,Label， 
Width,Height, Handle 和 Enabled 等 来 识别 它们 。 对 于 学 过 面向 对 象 编程 工具 如 VB， 
VC 或 Delphi 等 的 读者 来 说 ,这 些 对 象 的 属性 是 非常 熟悉 的 。 

WinRunner 识别 GUI 对 象 的 过 程 非常 简单 。 例 如 , 当 WinRunner 识别 一 个 OK 按 
钮 时 ,会 记录 这 个 按钮 的 属性 信息 ,如 所 属 的 窗口 (如 属于 Open 窗口 中 的 GUI 对 象 ) ,所 
属 的 Class( 如 push-button) ,按钮 的 文字 卷 标 (如 OK 按钮 ) 等 。 但 对 于 Width, Height， 
Handle 或 其 他 属性 一 般 会 忽略 掉 。WinRunner 在 识别 GUI 对 象 后 ,会 将 这 些 属性 描述 
信息 保存 在 GUI 文件 中 ,这 种 文件 就 称 为 GUI Map 文件 。 这 样 , 当 运行 测试 脚本 时 ， 
WinRunner 会 根据 测试 脚本 中 的 GUI 对 象 的 标识 如 label, 在 相应 的 GUI 文件 中 找到 对 
象 在 Windows 操作 系统 中 注册 的 标识 ,然后 通过 标识 找到 相应 的 GUI 对 象 , 再 对 其 进行 
操作 。 如 果 GUI Map 文件 不 存在 或 内 容 出 现 错误 ,会 造成 测试 脚本 无 法 正确 运行 。 

由 于 GUI Map 在 WinRunner 应 用 的 体系 结构 中 处 于 核心 地 位 ,因此 理解 和 掌握 
GUI Map 的 概念 和 正确 使 用 WinRunner 显得 至 关 重 要 。 


1. GUI Map File 模式 

在 创建 测试 工程 时 ,应 首先 确定 GUI map file 模式 ,这 可 以 在 General Options 对 话 
框 (图 9-10) 中 进行 选择 。 在 WinRunner 中 ,有 GUI Map file per test 和 Global GUI Map 
file 两 种 GUI map file 模式 。 下 面 分 别 简单 介绍 之 。 

(1) Global GUI Map file 模式 

在 WinRunner 中 ,一 般 来 说 不 同 的 测试 脚本 所 测试 的 GUI 对 象 是 不 完全 相同 的 ,但 
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如 果 为 每 组 测试 都 准备 一 个 GUI Map 文件 ,在 某 些 情况 下 则 显得 元 余 。 因 此 ,共享 GUI 
Map 文件 是 一 种 很 好 的 方法 。Global GUI Map file 模式 采用 的 便 是 这 样 一 种 思想 。 在 
这 种 模式 下 ,可 以 多 个 测试 脚本 共享 一 个 GUI Map 文件 。 在 开启 测试 脚本 时 ,同时 加 载 
所 使 用 的 Global GUI Map 文件 即 可 。 

产生 Global GUI Map 文件 的 方法 是 在 录制 测试 脚本 前 ,让 WinRunner 全 面 学 习 被 
测 软 件 的 所 有 GUI 对 象 ,一 般 采 用 WinRunner 提供 的 
RapidTest Script Wizard 功能 来 完成 。 这 种 模式 适合 已 
经 熟悉 了 WinRunner 使 用 的 用 户 。 

在 采用 Global GUI Map file 模式 的 情况 下 ,如 果 在 
录制 脚本 时 ,出 现 了 一 些 新 的 GUI 对 象 , WinRunner 会 
自动 将 其 识别 出 来 ,并 保存 在 临时 的 GUI 文件 中 。 在 
WinRunner 的 GUI Map Editor 窗口 中 ,该 临时 文件 显 
示 为 * L0 二 Temporary 过 文件 ,如 图 9-14 所 示 。 在 这 
种 情况 下 ,应 注意 将 临时 GUI 文件 合并 到 全 局 的 GUI 
Map 文件 中 ,否则 运行 脚本 时 系统 会 提示 找 不 到 对 象 。 

(2) GUI Map file per test 模式 

在 这 种 模式 下 ， 当 用 户 新 建立 一 个 测试 脚本 时 ， 
WinRunner 会 自动 建立 此 测试 脚本 的 GUI Map 文件 。 Eee 
当 存 储 测试 脚本 时 , WinRunner 会 自动 储存 GUI Map 
文件 。 开 启 测试 脚本 , WinRunner 会 自动 加 载 GUI 图 9-14 临时 GUI 文件 
Map 文件 。 总 之 一 切 与 GUI Map File 有 关 的 动作 ,都 
由 WinRunner 自动 处 理 。 因 此 ,这 种 模式 很 适合 WinRunner 的 初学 者 。 


2. 使 用 RapidTest Script Wizard 学 习 GUI 对 象 

下 面 以 一 个 例子 演示 如 何 使 用 RapidTest Script Wizard 自动 学 习 被 测 软件 的 GUI 
对 象 以 生成 GUI Map 文件 。 使 用 的 被 测 软件 是 WinRunner 自 带 的 Flight 软件 ,该 软件 

(1) 在 Windows 的 “程序 ”菜单 中 , 单 击 WinRunner->Sample Applications 文件 夹 中 
的 Flight 4A 选项 ,如 图 9-15 所 示 。 


局 文档 D) + 回 360 安 全 了 士 ， 山 wnRunner 8 Mercury Tours ste 
本 | 加 天 网 防火 墙 个 人 版 » 多 上 visual Basic Flight 1A 
回 Maosoft visual studo6.0 "SS < Visual Basic Flight 16 


图 9-15 启动 Flight 4A 命令 


(2) 打开 的 Flight 4A 登录 对 话 框 如 图 9-16 所 示 , 在 对 话 框 中 输入 代理 用 户 名 
(Agent Name) ,名 称 任意 ,但 必须 不 小 于 4 个 英文 字符 ;密码 (Password)mercury ,然后 单 
击 OK 按钮 。 
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图 9-16 Flight 4A 登录 对 话 框 


(3) 验证 正确 后 ,将 打开 系统 主 界面 Flight Reservation 窗口 ,如 图 9-17 所 示 。 


图 9-17 Flight 4A 系统 主 界面 


(4) 运行 WinRunner, 创建 一 个 新 的 测试 。 启 动 RapidTest Script Wizard, 打开 
RapidTest Script Wizard 对 话 框 ,如 图 9-18 所 示 , 单 击 Next 按钮 ,进入 下 一 步 对 话 框 。 

(5) 在 打开 的 对 话 框 (图 9-19) 中 , 单 击 “手指 ”按钮 ,将 鼠标 移动 到 Flight Reservation 窗 
口 ,如 图 9-20 所 示 。 注 意 ,鼠标 形状 应 是 手指 形状 , 且 选 中 窗口 的 边框 应 处 于 闪烁 状态 。 


图 9-18 ”RapidTest Script Wizard 欢迎 对 话 框 9-19 选择 应 用 程序 
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图 9-20 ”Flight Reservation 窗口 


(6) 此 时 ,图 9-19 对 话 框 的 Window Name 文本 框 中 将 出 现 将 被 学 习 的 窗口 名 
称 一 一 Flight Reservation ,如 图 9-21 所 示 。 


Make sure your application is open and 
accessible 


Press the hand icon and then click on your 


Ca 


ak |[ New> | ca | nep | 
图 9-21 应 用 程序 被 识别 


(7) 单 击 Next 按钮 进行 下 一 步 操 作 , 进 入 如 图 9-22 所 示 对 话 框 ,取消 所 有 复 选 框 的 
选取 。 

(8) 单 击 Next 按钮 进行 下 一 步 操 作 , 进 入 如 图 9-23 所 示 对 话 框 。 选 中 Express 单 选 
按钮 ,再 单 击 Learn 按钮 。 

(9) 这 时 ,Flight Reservation 窗口 中 的 各 个 子 窗口 将 开始 闪烁 ,WinRunner 开始 记 
录 所 有 GUI 的 状态 及 相关 信息 ,同时 左上 角 将 有 个 信息 框 显示 工作 状态 。 该 过 程 可 能 会 
进行 较 长 的 时 间 ,并 且 被 测 软件 所 包含 的 子 窗口 越 多 .识别 所 耗费 的 时 间 就 越 多 。 注 意 在 
识别 的 过 程 中 , WinRunner 有 时 可 能 会 报错 。 最 常见 的 错误 是 WinRunner 无 法 关闭 
GUI 对 象 窗口 ,这 种 错误 的 原因 可 能 是 WinRunner 向 操作 系统 发 出 关闭 窗口 的 消息 ,但 
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图 9-23 设置 学 习 的 流程 


在 规定 的 时 间 内 没有 响应 。 遇 到 这 种 情况 ,读者 可 以 重新 将 识别 的 过 程 进行 一 次 。 为 了 
减少 此 类 错误 的 发 生 ,建议 在 识别 过 程 中 尽量 关闭 其 他 无 关 的 应 用 程序 。 
(10) 当 窗 口 停止 闪烁 时 ,出 现 如 下 提示 对 话 框 如 图 9-24 所 示 ,选中 NO 单 选 按钮 ， 


图 9-24 提示 对 话 框 
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单 击 Next 按钮 进行 下 一 步 。 


(11) 出 现 保存 GUI Map file 路 径 对 话 框 ,如 图 9-25 所 示 。 在 对 话 框 中 ,可 以 修改 其 
保存 路 径 和 GUI Map 文件 的 名 称 。 然 后 单 击 Next 按钮 进入 下 一 步 。 


图 9-25 保存 GUI Map 对 话 框 


(12) 出 现 Congratulations 对 话 框 ,如 图 9-26 所 示 , 单 击 OK 按钮 。 至 此 ,识别 过 程 
完成 。 


图 9-26 识别 成 功 对 话 框 


9.6.4 创建 测试 

在 WinRunner 中 ,生成 测试 工程 的 方法 有 自动 录制 脚本 和 手工 编写 脚本 两 种 。 后 者 
使 用 方式 灵活 ,功能 较 强 ,但 只 适合 对 WinRunner 使 用 较 熟 练 的 测试 人 员 。 对 初学 者 ,一 
般 使 用 自动 录制 脚本 方式 进行 人 门 的 学 习 。 在 实际 应 用 过 程 中 ,多 为 将 这 两 种 方法 的 结 
合 , 即 先 使 用 自动 录制 脚本 方式 创建 测试 工程 ,然后 再 用 手工 添加 所 需 脚本 。 本 节 主 要 学 
习 如 何 使 用 上 下 文 相关 模式 录制 脚本 (有 关 模 拟 模式 ,读者 可 以 参看 检查 点 测试 中 的 图 像 
检查 点 ) 。 我 们 使 用 的 被 测 软件 是 WinRunner 自 带 的 Flight 系统 。 
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1. 录制 测试 脚本 

测试 脚本 录制 步骤 如 下 。 

(1) 运行 WinRunner, 单 击 File 菜单 中 的 New 选项 ,创建 一 个 新 的 测试 。 单 击 File 
菜单 中 的 Save 选项 ,或 者 工具 栏 上 的 “保存 ”按钮 将 其 保存 ,文件 名 为 sample_1。 需 要 注 
意 的 是 ,保存 脚本 文件 时 . WinRunner 将 自动 创建 一 个 名 为 sample_1 的 文件 夹 ,并 将 脚 
本 文件 保存 在 其 中 ,如 图 9-27 所 示 。 
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图 9-27 sample_1 文件 夹 


(2) 运行 Flight 4A ,参看 图 9-15 一 图 9-17。 

(3) 单 击 Test 菜单 中 的 Record-Context Sensitive 选项 ,开始 以 “上 下 文 相 关 ” 
(Context Sensitive) 模 式 录制 一 个 脚本 。 

(4) 返回 Flight Reservation 窗口 , 单 击 File 菜单 中 的 Open Order 选项 ,如 图 9-28 所 示 。 
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9-28 打开 Open Order 对 话 框 命令 


~、 
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(5) 在 打开 的 Open Order 对 话 框 ,如 图 9-29 所 示 ,选中 Order No. 复 选 框 ,在 文本 框 
中 输入 数字 1( 表 示 打 开 1 号 订单 ), 单 击 OK 按钮 。 
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图 9-29 ”Open Order 对 话 框 


(6) Flight Reservation 窗口 中 将 出 现 所 选中 记录 的 内 容 , 如 图 9-30 所 示 。 
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图 9-30 ”订单 记录 窗口 


(7) 单 击 工具 栏 上 的 “停止 ”按钮 ,停止 录制 。 
(8) 保存 录制 的 脚本 。 


2. 测试 脚本 简介 

WinRunner 的 测试 文件 是 由 测试 脚本 语言 TSL(Test Script Language) 组 成 的 文本 
文件 。 下 面 以 sample_1 脚本 文件 为 例 进行 介绍 ,如 
图 9-31 所 示 。 

(1) # Flight Reservation 语句 是 一 条 注释 语 
句 , 在 WinRunner 中 ,注释 语句 均 以 # 号 开始 ,注释 
语句 不 被 系统 执行 ,只 起 说 明 作 用 。WinRunner 在 
打开 新 的 窗口 时 ,都 会 自动 增加 一 行 注释 。 图 9-31 测试 脚本 示例 


了 Flight Reservation 
win_activate (“Flight Reservation"); 
set_window (“Flight Reservation”, 4); 
nenu_select_iten ("File:Open Order...”); 


# Open Order 
set_window ("Open Order”, 1); 
button_set ("Order No.”, ON): 
edit_set (Edit_l “1°) 
button_press ("Ok"); 


ES 
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(2) 在 win_activate ("Flight Reservation") 中 ,win_activate() 函 数 激活 一 个 窗口 ,其 
参数 为 窗口 名 称 , 如 本 例 中 的 "Flight Reservation"。 

(3) 每 次 打开 新 的 窗口 时 ,WinRunner 都 会 添加 一 个 set_window() 函 数 ,例如 set_ 
window ("Flight Reservation", 4) ,Flight Reservation 为 窗口 的 名 称 ,4 为 延 时 的 时 间 ， 
单位 为 秒 。 

(4) menu_select_item ("File; Open Order. ..") 即 打开 File 菜单 中 的 Open Order 
选项 。 

(5) 单 击 一 个 对 象 时 , WinRunner 会 分 配给 它 一 个 逻辑 名 称 ,一 般 为 这 个 对 象 的 文本 
标签 (text label) 。 例 如 ,选中 窗口 中 的 复 选 框 按钮 , WinRunner 将 生成 语句 : button_set 
("Order No. "，ON) ,其 中 Order No 为 这 个 对 象 的 逻辑 名 称 ,ON 为 复 选 框 被 选中 。 

(6) 当 从 键盘 输入 时 , WinRunner 会 将 产生 一 个 Type( 类 型 ) .obj_type( 对 象 类 型 ) 
或 一 个 edit__set() 描述 于 脚本 中 。 例 如 本 例 , 在 Order No. 文本 框 中 输入 数字 , 则 
WinRunner 会 生成 语句 : edit_set ("Edit-1","1"), 其 中 Edit-] 为 文本 框 对 象 的 迎 辑 名 ， 
1 为 文本 框 的 值 为 1 。 

(7) button_press ("OK") 表 示 单 击 OK 按钮 ,关闭 Open Order 对 话 框 。 

更 多 的 帮助 可 以 单 击 WinRunner 中 的 Help 菜单 中 的 TSL Onling Reference 选项 进 
行 参考 。 另 外 ,用 户 可 以 在 WinRunner 的 工作 窗口 中 获得 帮助 。 方 法 是 在 脚本 中 选中 某 
个 函数 或 关键 字 , 然 后 按 Fl 键 。 


3。 运行 测试 脚本 

录制 完 脚本 之 后 ,可 以 运行 测试 脚本 ,由 WinRunner 模拟 用 户 的 操作 。 本 节 以 上 节 
录制 的 sample_1 脚本 为 例 , 介 绍 如 何 执行 测试 脚本 。 

(1) 启动 WinRunner 和 Flight 4A ,方法 如 前 所 述 。 

(2) 选择 File 菜单 中 的 Open 选项 ,或 在 工具 栏 上 单 击 “ 打 开 ” 按 钮 加 打开 sample_1 
测试 脚本 。 

(3) 在 工具 栏 上 选择 Verify 模式 按钮 aa 。 

(4) 选择 Test 菜单 中 的 Run from Top 选项 ,或 在 工具 栏 上 单 击 From Top 按钮 
[sa, 系 统 将 弹出 一 个 运行 测试 对 话 框 , 如 图 9-32 所 示 。 


TestBunName [ET 可 
厂 Use Debug mode dont display this dialog box] 
|S Display test results at end of un 
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图 9-32 运行 测试 对 话 框 


(5) 在 Test Run Name 下 拉 列 表 中 选择 ,系统 默认 为 resl1。 这 个 名 称 将 作为 文件 夹 
保存 在 测试 脚本 所 在 文件 夹 下 (sample_1 所 在 文件 夹 )。 选 中 Display test results at end 
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of run 复 选 框 ,表示 运行 完 脚本 后 自动 弹出 结果 窗口 。 

(6) 单 击 OK 按钮 ,运行 测试 。 

(7) 运行 结束 ,自动 显示 分 析 结 果 。 

4. 分 析 脚 本 运行 结果 

sample_1 脚本 运行 结束 后 ,系统 将 自动 弹出 一 个 结果 显示 窗口 ,如 图 9-33 所 示 。 单 
击 工具 栏 上 的 图 标 按钮 有 也 可 以 弹出 该 窗口 。 下 面 简单 说 明 该 窗口 的 组 成 。 
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图 9-33 测试 结果 窗口 的 组 成 


该 窗口 各 个 部 分 的 含义 如 下 : 

Q@ 显示 当前 测试 脚本 的 名 称 。 

@ 显示 当前 测试 结果 路 径 名 称 。WinRunner 中 测试 结果 一 般 是 放 在 一 个 形 如 res# 
的 文件 夹 中 ,其 中 # 代 表 测 试 的 次 数 , 例 如 图 中 示例 表明 是 第 9 次 测试 。 在 下 拉 列 表 框 中 
选择 res8, 则 显示 如 图 9-34 的 窗口 ,表明 第 8 次 测试 出 现 了 错误 ,同时 列 出 错误 信息 。 

@ 显示 测试 运行 的 状态 (通过 或 失败 )。 双 击 Test Result 节点 ,可 以 折 秋 或 展开 该 
节点 。 

加 显示 本 次 测试 的 相关 信息 ,如 日 期 ,操作 者 名 称 、 异 常 结 果 所 保存 的 文件 夹 和 总 运 
行 时 间 。 双 击 General Information 节点 ,可 以 折 双 或 展开 该 节点 。 

@ 显示 测试 运行 期 间 的 主要 发 生 事件 .详细 信息 、 运 行 结果 .开始 时 间 , 以 及 每 个 发 
生 事件 在 测试 脚本 中 的 行 号 。 
9.6.5 GUI 检查 点 

通过 前 面 的 学 习 , 我 们 对 WinRunner 的 框架 结构 和 测试 流程 已 经 有 了 初步 的 了 解 ， 
也 学 习 了 如 何 录制 脚本 和 运行 测试 。 但 到 目前 为 止 , 并 未 使 用 测试 脚本 进行 更 多 的 实质 
性 功能 测试 。 本 小 节 和 之 后 的 9. 6. 6 和 9. 6.7 小 节 将 介绍 WinRunner 中 的 检查 点 
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Re Total number of bitmap checkpoints: 
+ Total number of GUI checkpoinis 
A Genera Iniomation 


indow"Dpen Order" Emor Dbiect|- 
sample_1 


图 9-34 测试 结果 窗口 示例 


(Checkpoint) 测 试 ,以 了 解 如 何 使 用 WinRunner 进行 较 复杂 的 功能 测试 。 

所 谓 检 查 点 ,是 指 在 WinRunner 的 脚本 中 的 一 定位 置 ,根据 需 要 设置 检查 条 件 , 以 此 
判断 程序 的 设计 、 运 行 是 否 正确 。 其 主要 的 思想 是 判断 程序 中 当前 运行 值 与 期 望 值 是 否 
匹配 。WinRunner 中 的 检查 点 分 为 4 类 : GUI 检查 点 、 文 本 检查 点 、 图 像 检 查 点 和 数据 
库 检 查 点 。 本 书 主要 介绍 前 3 类 检查 点 。 

在 本 小 节 , 我 们 先 介 绍 GUI 检查 点 。 可 以 使 用 GUI 检查 点 来 检查 被 测 软件 中 GUI 
对 象 的 属性 ,测试 程序 的 功能 是 否 正常 。 例 如 ,可 以 检查 某 个 button 是 否 可 用 ; 某 个 编辑 
框 的 文本 格式 是 否 符合 要 求 ; 某 个 系统 的 不 同 版 本 的 GUI 界面 是 否 一 致 等 。 当 GUI 对 
象 的 属性 值 与 预期 值 不 符合 时 ,就 表示 可 能 存在 问题 。 下 面 用 一 个 实例 演示 如 何 使 用 
GUI 检 查 点 。 


1. 建立 GUI 对 象 检查 点 

(1) 启动 WinRunner 和 Flight 4A。 

(2) 创建 新 的 测试 文件 sample_2。 

(3) 打开 GUI Map file 文件 。 选 择 WinRunner 菜单 pr Ei 
栏 Tools 中 的 GUI Map Editor 选项 ,打开 GUI Map Editor "Copyight 2002fstati 
窗口 ;选择 Files 菜单 中 的 Open 选项 ,打开 flight4a. GUI 人 wo 
文件 。 该 文件 是 我 们 在 前 面 的 例子 中 建立 的 Flight 4A 系 [8 esomciair 加 
统 的 全 局 GUI 文件 ,如 图 9-35 所 示 。 

(4) 单 击 WinRunner 菜单 栏 Test 中 的 Record- 
Context Sensitive 选项 ,开始 以 “上 下 文 相 关 ”(Context 
Sensitive) 模 式 录制 脚本 。 

(5) 返回 Flight Reservation 窗口 , 单 击 其 File 菜单 


中 的 Open Order 选项 .弹出 Open Order 对 话 框 ,如 ”图 9-35 GUI Map Editor 窗口 
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9-36 所 示 。 

(6) 在 Open Order 对 话 框 中 ,选中 Order No. ,输入 数字 3 ,表示 打开 3 号 订单 。 

(7) 单 击 WinRunner 菜单 栏 Insert 中 GUI Checkpoint 级 联 菜单 的 For Object/ 
Window 选项 ,出 现 手 形状 光标 ,然后 将 此 光标 指向 Open Order 对 话 框 中 的 Order No. 文 
本 框 , 如 图 9-37 所 示 。 


| | 

Seach 一 一 一 Searchr 
T GustoneNang EB Cusome Name 

[| = 
厂 Eight Date FF EiontDate 

要 .党 司 ss 
QOrder No. [ Order No 

el al rl el 
图 9-36 Open Order 对 话 框 图 9-37 捕捉 Order No. 文本 框 


(8) 双击 Order No. 文本 框 , 出 现 Check GUI 对 话 框 , 如 图 9-38 所 示 。 该 对 话 框 中 
列 出 了 Open Order 对 话 框 的 检查 清单 。 注 意 , 如 果 单 击 Order No. 文本 框 , 则 不 会 出 现 
该 对 话 框 ,而 是 直接 在 WinRunner 中 生成 脚本 语句 。 


图 9-38 Check GUI 对话 框 


(9) Check GUI 对 话 框 中 的 右 下 方 是 Properties( 属 性 ) 窗 格 。 该 窗 格 列 出 了 当前 
Edit_1 控件 的 属性 和 当前 的 期 望 值 。 选 中 该 属性 , 即 可 编辑 该 属性 的 期 望 值 。 选 中 
Range 属性 , 单 击 其 Arguments 属性 列 ,弹出 Check Arguments 对 话 框 ,如 图 9-39 所 示 。 
在 该 对 话 框 的 From 和 To 文本 框 中 分 别 填 人 1 和 5, 表明 该 编辑 框 允许 的 范围 值 为 
1 一 5。 单 击 Range 属性 的 Expected Value 属性 列 ,在 文本 框 中 填 人 3。 然 后 单 击 OK 按 
钮 , 回 到 Check GUI 对 话 框 。 

(10) 在 Check GUI 对 话 框 中 , 单 击 OK 按钮 。 此 时 WinRunner 脚本 窗 格 出 现 设置 
检查 点 语句 obj_check_gui, 如 图 9-40 所 示 。 该 函数 中 ,listl. ckl 为 检查 清单 文件 ,guil 为 
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预期 输出 结 


果 文 件 。 


天 Open Order 
set_window ("Open Order”, 1); 
button_set (“Order No.”, ON): 
set_window (“Open Order”, 3); 

3 


CI eol uw | 


图 9-39 设置 属性 取 值 范围 


图 9-40 设置 的 检查 点 语句 脚本 


(11) 返回 Open Order 对 话 框 , 单 击 OK 按钮 , 返 
图 9-41 所 示 。 


反 回 Flight Reservation 窗口 , 如 


Elslxlelol el 


[Flight Schedule 


Dale offFighe Fy From cS 


12/07/07 Los Angeles Be 


[Drder Information: 


Fight No: Departure Time: Arival Time: Arine: 
Fis FE Ja Fm 
Name: 


Mary Parker Tickets: 万 


ass Pice 四 B5 
| Ere CF Business 全 Economy Taa FE 
Update Order| Daasods | 
一 


图 9-41 3 号 订单 记录 窗口 


(12) 单 击 WinRunner 工具 栏 上 的 “停止 ?按钮 同 区 到, 停止 录制 。 
(13) 在 工具 栏 上 单 击 From Top 按钮 攻 EE, 运 行 该 测试 文件 ,测试 顺利 通过 ,并 
显示 测试 结果 ,如 图 9-42 所 示 。 


2. 设置 错误 1 

(1) 现在 修改 编辑 框 Edit_1 的 期 望 值 。 单 击 WinRunner 菜单 栏 Insert 中 GUI 
Checkpoint 级 联 菜单 的 For Multiple Objects 选项 .打开 Create GUI Checkpoint 对 话 框 。 
单 击 Open 按钮 ,打开 listl. ckl 检查 清单 文件 ,如 图 9-43 所 示 。 

(2) 在 Properties 窗 格 中 , 单 击 Compare 属性 的 Expected Value 属性 列 ,在 文本 框 中 
填 和 人 4( 在 前 面 的 录制 脚本 的 过 程 中 ,其 值 为 3) ,然后 单 击 OK 按钮 ,如 图 9-44 所 示 。 

此 时 WinRunner 脚本 窗口 出 现 一 条 新 的 设置 检查 点 语句 win_check_gui, 如 图 9-45 
所 示 。 该 函数 中 ,此 时 预期 输出 结果 文件 变 成 了 修改 过 的 gui2 。 
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9-44 ”修改 Compare 属性 的 期 望 值 
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¥ Open Order 
set_window ("Open Order”, 1); 
button_set (“Order No.”, ON); 
set_window (“Open Order”, 5); 
edit_set (Edit_1 


); 
obj Ee Edit 1 和 “listl. hl “guil"，1) : 


图 9-45 ”预期 输出 结果 文件 脚本 


(3) 在 WinRunner 工具 栏 上 单 击 From Top 按钮 荐 Sa 而 运行 该 测试 文件 ,测试 报 
错 ,并 弹出 报错 对 话 框 ,如 图 9-46 所 示 。 


LN Mismatch detected duing GUI veriication of “Dpen Order” 
epee ergyew he leatents row reerine 
Se 


CE ee | 
图 9-46 报错 对 话 框 


(4) 单 击 Continue 按钮 ,完成 测试 。 显 示 如 图 9-47 所 示 测 试 结果 。 


+ Total number of bimap checkponts 
#7 Total number of GUI checkponts 


end GUI checkpont 
stop run 


图 9-47 显示 测试 结果 


在 测试 结果 窗口 的 信息 列表 中 双击 红色 显示 的 第 12 行 错误 信息 ,弹出 GUI 
Checkpoint Results( 检 查 点 错误 信息 ) 对 话 框 ,如 图 9-48 所 示 。 对 话 框 内 清楚 地 显示 了 
产生 错误 的 原因 ,是 由 于 编辑 框 Edit_1 的 期 望 值 与 实际 值 不 匹配 。 


3. 设置 错误 2 
(1) 重新 修改 编辑 框 Edit_1 的 期 望 值 。 单 击 WinRunner 菜单 栏 Insert 中 GUI 
Checkpoint 级 联 菜单 的 For Multiple Objects 选项 ,打开 Create GUI Checkpoint 对 话 框 。 
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图 9-48 ”检查 点 错误 信息 对 话 杠 


单 击 Open 按钮 ,打开 listl. ckl 检查 清单 文件 ,如 图 9-43 所 示 。 

(2) 在 Properties 窗 格 中 , 单 击 Compare 属性 的 Expected Value 属性 列 , 在 文本 框 
中 填 入 6; 单 击 Range 属性 的 Expected Value 属性 列 ,在 文本 框 中 也 填 人 6, 然 后 单 击 OK 
按钮 ,如 图 9-49 所 示 。 


E7| 
到 
医 | 
| 
辐 
到 | 
赎 


图 9-49 设置 属性 的 期 望 值 


此 时 ,WinRunner 脚本 窗口 会 出 现 一 条 新 的 设置 检查 点 语句 win_check_gui, 如 
图 9-50 所 示 。 该 函数 中 ,此 时 预期 输出 结果 文件 变 成 了 修改 过 的 gui3 。 


于 Open Order 
set_window ("Open Order”, 1):; 
button_set (“Order No.“, ON):; 
set_window (“Open Order”, 5); 
edit_set (“Edit_1”, “3°); 
win_check_gui (“Open Order”’, “list1. ckl”, “gui2", 1); 


图 9-50 修改 后 的 脚本 (1) 
删除 语句 win_check_gui("Open Order", "listl. ckl", "gui2", 1) ,并 将 语句 edit_set 
("Edit 1"，"3") 修 改 为 edit_set ("Edit_1","6"), 如 图 9-51 所 示 。 


(3) 在 WinRunner 工具 栏 上 单 击 按 钮 上 il 运行 该 测试 文件 ,测试 报错 ,并 弹出 
图 9-52 所 示 的 报错 对 话 框 。 
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# Open Order 
set_window (“Open Order”, 1); 
button_set ("Order No.”, ON): 
set_window (“Open Order”, 5); 


win_check_gui( Open Order”, “list1.ckl”, “gui3", 1); 


图 9-51 修改 后 的 脚本 (2) 


Test Resut 
4 Total number of bimap checkpoints: 


end GUI checkpom 
区 


9-53 测试 结果 


(4) 单 击 Continue 按钮 ,完成 测试 ,测试 结果 显示 如 图 9-53 所 示 。 

在 测试 结果 窗口 的 信息 列表 中 ,双击 红色 显示 的 第 12 行 错 误 信 息 ,弹出 GUI 
Checkpoint Results 对 话 框 ,如 图 9-54 所 示 ,显示 出 产生 错误 的 原因 是 由 于 编辑 框 Edit_1 
的 实际 值 超出 了 所 允许 的 范围 1 一 5。 


4. 在 不 同 版 本 的 应 用 程序 下 的 测试 

在 这 一 部 分 ,运行 与 应 用 程序 Flight 4A 稍 有 差异 的 另 一 版 本 Flight 4B, 用 于 模拟 在 
软件 开发 过 程 中 软件 修改 之 后 ,如 何 使 用 WinRunner 进行 测试 来 检验 软件 的 变化 。 

(1) 先 运行 Flight 4A。 

(2) 创建 新 的 测试 文件 sample_3 。 

(3) 打开 GUI Map 文件 (方法 如 前 所 述 ) 。 


i] 


图 9-54 检查 点 错误 信息 显示 


(4) 单 击 WinRunner 菜单 栏 Test 中 的 Record-Context Sensitive 选项 ,开始 以 “上 下 
文 相关 ”(Context Sensitive) 模 式 录制 脚本 。 

(5) 返回 Flight Reservation 窗口 , 单 击 其 菜单 栏 File 中 的 Open Order 选项 ,弹出 
Open Order 对 话 框 ;在 对 话 框 的 Order No. 文本 框 中 输入 数字 3, 表 示 打 开 3 号 订单 , 单 
击 OK 按钮 ,出 现 Flight Reservation 窗口 (图 9-41); 此 时 ,再 单 击 菜单 栏 File 中 的 Fax 
Order 选项 ,弹出 Fax Order No. 3 窗口 ,如 图 9-55 所 示 。 


图 9-55 Fax Order No. 3 窗口 


(6) 单 击 WinRunner 菜单 栏 Insert 中 GUI Checkpoint 级 联 菜单 的 For Multiple 
Objects 选项 ,启动 Create GUI Checkpoint 对 话 框 ; 单 击 Add 按钮 ,出 现 手 形状 光标 , 然 
后 将 手 形状 分 别 单 击 Fax Order No. 3 窗口 中 的 Class, # Tickets,Ticket Price,From 和 
To 文本 框 , 如 图 9-56 所 示 。 

(7) 单 击 鼠 标 右键 ,关闭 对 象 捕 捉 , 返 回 Create GUI Checkpoint 对 话 框 ; 单 击 OK 按 
钮 ,关闭 对 话 框 。 

单 击 WinRunner 工具 栏 上 的 “停止 ?按钮 国 区 到 ,停止 录制 。 此 时 WinRunner 脚本 窗 
口 出 现 设置 检查 点 语句 ,如 图 9-57 所 示 。 

(8) 保存 测试 文件 。 在 工具 栏 上 单 击 按钮 及 i 运行 该 测试 文件 ,测试 顺利 通过 。 
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图 9-56 捕捉 窗口 中 的 对 象 


# Far Order No. 5 
win_activate ("Fax Order No. 3°); 
set_window (“Fax Order No. 3", 7); 
button_press (“Cancel”); 


图 9-57 设置 检查 点 脚本 


(9) 关闭 Flight 4A ,运行 Flight 4B。 
(10) 在 WinRunner 工具 栏 上 单 击 按钮 由 i 运行 该 测试 文件 ,测试 报错 ,并 弹出 
报错 对 话 框 ,如 图 9-58 所 示 。 


9-58 ”显示 测试 报错 信息 


(11) 单 击 Continue 按钮 ,完成 测试 。 测 试 结果 显示 如 图 9-59 所 示 。 

在 测试 结果 窗口 的 信息 列表 中 ,双击 红色 显示 的 第 18 行 错误 信息 ,弹出 如 图 9-60 所 
示 的 GUI Checkpoint Results 对 话 框 , 显 示 出 产生 错误 的 原因 有 两 处 。 
9.6.6 文本 检查 点 

使 用 WinRunner 提供 的 文本 检查 点 功能 ,可 以 获取 程序 界面 中 的 图 像 或 GUI 对象 
上 的 文字 ,然后 再 通过 手工 编写 测试 脚本 的 方法 来 检查 文字 是 否 正确 。 

使 用 文本 检查 点 ,主要 可 以 完成 如 下 功能 : 

。 验证 某 个 值 是 否 在 一 定 范围 内 ; 

。 计算 数值 是 否 正确 。 

文字 检查 点 的 建立 过 程 是 , 当 用 户 指 定 要 读 取 文字 的 区 域 . 对 象 或 窗口 时 ， 
WinRunner 会 用 win_get_text 或 obj get_text 函数 读 取 文字 ,并 将 读 取 到 的 文字 储存 到 
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NOTestResut 
Wa Total number of bamap checkpoints: 


+ Total number of GUI checkpoints: 


图 9-59 测试 结果 显示 
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图 9-60 显示 检查 点 错误 信息 


变量 中 ,然后 再 以 手工 编写 测试 脚本 方式 ,检查 变量 中 的 文字 是 否 为 预期 的 文字 。 注 意 ， 
如 果 是 验证 标准 的 GUI 对 象 如 按钮 .功能 选单 等 的 文字 ,建议 用 GUI 检查 点 ,以 免 去 因 
手动 编写 测试 脚本 带 来 的 不 便 。 

下 面 用 一 个 实例 演示 如 何 使 用 文字 检查 点 ,该 示例 的 主要 功能 是 检查 “记事 本 ”文件 
内 容 的 变化 。 

(1) 启动 WinRunner。 

(2) 创建 新 的 测试 文件 sample_4。 

(3) 打开 Windows 的 “记事 本 ”窗口 , 填 入 如 图 9-61 所 示 的 数据 ,并 保存 为 
recorder. txt。 

(4) 单 击 菜单 栏 Test 中 的 Record-Context Sensitive 选项 ,开始 以 “上 下 文 相关 ” 
(Context Sensitive) 模 式 录制 一 个 脚本 。 
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图 9-61 recorder. txt 文件 内 容 


(5) 单 击 WinRunner 菜单 栏 Insert 中 Get Text 级 联 菜单 的 For Object/ Window 选 
项 。 此 时 ,出 现 手 形状 光标 ,将 手 形状 指向 recorder* 记 事 本 ”窗口 的 编辑 区 ,如 图 9-62 所 
示 , 单 击 鼠 标 右键 ,停止 捕捉 , 回 到 WinRunner 主 界 面 。 


图 recorder - 记事 本 
7 RE RD 到 也 


图 9-62 修改 后 的 recorder. txt 


(6) 单 击 WinRunner 工具 栏 上 的 “停止 "按钮 加 局 到 .停止 录制 。 此 时 WinRunner 脚 
本 窗口 出 现 检查 点 语句 obj_get_text, 如 图 9-63 所 示 。 5D WME ACE 
其 中 前 3 条 注释 语句 是 WinRunner 捕捉 到 的 文本 信息 ， 了 002 zr 儿 
该 信息 保存 在 obj_get_text 函数 的 参数 text 变量 中 。 F Pe a 
(7) 为 了 设置 文字 检查 点 ,在 脚本 语句 obj_ get_text obj_eet_text (Edit”, text) 
之 后 添加 条 件 判 断 语句 ,如 图 9-64 所 示 。 如 果 text 变量 图 9-63 检查 点 脚本 语句 
的 信息 与 让 条 件 匹配 , 则 在 测试 结果 窗口 返回 通过 信息 


“Text is correct!”, 和 否则 返回 失败 信息 。 


软件 测试 


#51D MME AGE 
00: JJD8 后 
#0029 WARY 21 


天 recorder - 避 复 共 
set_window("recorder - 记事 本 “， 
obj_get_text ("Edit”, text); 
e000 0001000009000, 
证 (text==“SID NAME AGE\r\n001 JOHN 18\r\n002 MARY 
tl_step(“Notepad Text”,0,"Text is correct!"); 
else 
tl1_step(“Notepad Text",1,"Text is not correct!"); 


图 9-64 返回 通过 或 失败 信息 脚本 


(8) 在 工具 栏 上 单 击 按钮 上 EEaE 运 行 该 测试 文件 ,测试 顺利 通过 ,并 显示 如 图 9-65 
所 示 的 测试 结果 。 


+ Total number of blmap checkponts: 
+ Total number of GUI checkpoints: 


sample_4 
Step Notepad TexL Stahus: Pass. Descipior Te is coned| 


sample_4 


图 9-65 测试 结果 显示 


(9) 修改 recorder 记事 本 文件 ,将 002 号 记录 的 AGE 改 为 20, 保 存 文 件 。 然 后 再 运 
行 sample_4 测试 文件 ,测试 报错 ,并 显示 如 图 9-66 所 示 的 测试 结果 。 
9.6.7 图 像 检查 点 

针对 应 用 程序 中 的 图 像 , WinRunner 提供 了 图 像 检 查 点 (Bitmap Checkpoint) , 它 是 
以 像素 点 (pixel) 为 单位 比较 图 像 的。 

WinRunner 使 用 以 下 3 种 方式 建立 图 像 检 查 点 : 

(1) 屏幕 区 域 : 以 鼠标 拖 中 的 方式 确定 图 像 检查 点 的 区 域 。 

(2) 窗口 : 以 整个 窗口 作为 图 像 检 查 点 的 区 域 。 

(3) GUI 对 象 : 以 整个 GUI 对 象 作为 图 像 检 查 点 的 区 域 。 

WinRunner 能 够 直接 取得 方 框 区 域 部 分 并 储存 成 预期 值 , 然 后 在 测试 脚本 中 插入 
obj_check_bitmap 或 win_check_bitmap 函数 (用 于 判断 所 建立 的 图 像 检 查 点 是 针对 区 
域 .GUI 对 象 还 是 窗口 对 象 ) 。 运 行 测试 脚本 时 , WinRunner 会 比 对 运行 时 的 图 像 与 预期 
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Fev ream ts oso 
4Y Total number of GUI checkponts: 


sample_4 000000 


Sep Notepad Te Status Fal Descrptior Tex is rot conect [CT 
ample 4 Ey 


图 9-66 修改 后 的 测试 结果 显示 


的 图 像 ,并 将 结果 显示 在 测试 结果 窗口 中 ;如 果 存 在 不 一 致 ,系统 就 会 报错 ,并 在 测试 结果 
窗口 显示 出 错 信 息 。 

下 面 用 一 个 实例 演示 如 何 使 用 图 像 检查 点 。 

(1) 启动 WinRunner 和 Flight 4A。 

(2) 创建 新 的 测试 文件 sample_5。 

(3) 打开 GUI Map 文件 。 选 择 WinRunner 菜单 栏 Tools 中 的 GUI Map Editor 选 
项 ,启动 GUI Map Editor 窗口 ;选择 GUI Map Editor 菜单 栏 Files 中 的 Open 选项 ,打开 
flight4a. gui 文件 。 

(4) 单 击 菜单 栏 Test 中 的 Record-Contex Sensitive 选项 ,开始 以 “上 下 文 相 关 ” 
(Context Sensitive) 模 式 录制 一 个 脚本 。 

(5) 在 Flight Reservation 窗口 中 , 单 击 File 菜单 中 的 Open Order 选项 ,弹出 Open 
Order 对 话 框 ;在 Order No. 文本 框 中 输入 数字 1, 表 示 打 开 1 号 订单 ; 单 击 OK 按钮 。 

(6) 单 击 File 菜单 中 的 Fax Order 选项 ,出 现 Fax Order 窗口 。 在 Fax Number 文本 
框 中 输入 10 位 数 的 传真 号 码 ( 可 以 是 任意 数字 ), 如 图 9-67 所 示 。 

(7) 移动 Fax Order 窗口 。 

(8) 按 F2 功能 键 ,或 者 单 击 工 具 列 上 的 按钮 用 jg 到 ,可 以 将 录制 模式 从 Context 
Sensitive Mode 切换 到 Analog Mode。 

(9) 在 Agent Signature 编辑 框 中 签 上 用 户 的 名 字 ( 使 用 鼠标 画图 ), 如 图 9-68 所 示 。 

(10) 按 F2 功能 键 , 或 者 单 击 工具 栏 上 的 “录音 ”按钮 访 EE 双 ,可 以 将 录制 模式 从 
Analog Mode 切换 到 Context Sensitive Mode。 

(11) 单 击 WinRunner 菜单 栏 Insert 中 Bitmap Checkpoint 级 联 菜 单 的 For Object/ 
Window 选项 ;使 用 手 形状 鼠标 指向 Agent Signature 签名 窗口 后 单 击 . 如 图 9-69 所 示 ; 此 
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证 | 
加 | PC” J 


ll 


图 9-69 捕捉 签名 窗口 
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时 ,WinRunner 将 捕获 一 个 Bitmap ,并 在 脚本 中 插入 Obj_Check_Bitmap 声明 语句 。 

(12) 单 击 Clear Signature 按钮 ,清除 签名 。 

(13) 为 清除 签名 后 的 签名 窗口 创建 一 个 Bitmap Checkpoint, 同 步骤 (11) 。 

(14) 在 Fax Order No. 1 窗口 中 单 击 Cancel 按 | obj_check_bitmap(" (static)”,， “Ing6”, 7); 
钮 ,关闭 窗口 。 ” se Order No. 1"):; 

(15) 停止 录制 ,保存 sample_5。 保 存 临时 GUI | neem a De 
文件 到 Global GUI Map 文件 flight4a. gui。 系 统 生 ! ieheck-bitnap( (static)”， “JneT”, 39); 
成 的 有 关 图 像 检查 点 脚本 语句 ,如 图 9-70 所 示 。 0 A 

(16) 在 工具 栏 上 单 击 按钮 睹 运行 该 测试 文件 ,测试 顺利 通过 ,并 显示 如 
图 9-71 所 示 的 测试 结果 。 


NE Test Resut 
和 ¥ To ramber oe tama eheckponts 
# Total number of GUI checkpomts 


|bitmap checkpdmg7:1 
[stop rn sample 5 


图 9-71 测试 结果 显示 


(17) 关闭 Flight 4A ,运行 Flight 4B。 
(18) 在 WinRunner 工具 栏 上 单 击 按钮 贿 ti 运 行 该 测试 文件 ,测试 报错 ,并 弹出 
报错 对 话 框 ,如 图 9-72 所 示 。 


Ce | 


图 9-72 报错 信息 显示 


(19) 单 击 Continue 按钮 ,完成 测试 ,测试 结果 显示 如 图 9-73 所 示 。 
(20) 在 测试 结果 窗口 的 信息 列表 中 ,双击 红色 显示 的 第 54 行 错误 信息 ,弹出 Bitmap 


~、 


区 


软件 测试 


[Tom nt ni espiits 
YY Total number of GUI checkpomts: 


ismalj000531 
[05.05:31 


图 9-73 显示 测试 结果 


图 9-74 ”Bitmap 对比 


窗口 ,如 图 9-74 所 示 。 

Bitmap 窗口 清楚 地 显示 了 产生 错误 的 原因 是 由 于 img7. bmp 的 期 望 值 与 实际 值 不 
匹配 。 这 是 由 于 Flight 4B 程序 的 Fax Order 窗口 的 Clear Signature 按钮 (参看 图 9-68) 
是 失效 的 ,所 以 无 法 将 前 面 的 签名 清除 。 需 要 说 明 的 是 ,这 是 系统 有 意 设计 的 错误 ,主要 
是 为 了 模拟 软件 开发 中 的 一 些 错 误 。 

9.6.8 使 用 函数 生成 器 

WinRunner 提供 了 强大 的 函数 生成 器 来 帮助 用 户 编写 测试 脚本 。 在 本 节 , 将 通过 一 
个 简单 的 例子 来 学 习 如 何 使 用 函数 生成 器 来 编写 测试 脚本 。 

该 示例 使 用 的 测试 程序 仍然 是 Flight 4A, 主要 功能 是 验证 Flight 4A 程序 的 Fax 
Order 窗口 中 的 票数 、 票 价 和 总 额 字段 是 否 正确 。 

(1) 启动 WinRunner 和 Flight 4A。 

(2) 创建 新 的 测试 文件 sample_6。 

(3) 打开 GUI Map 文件 。 选 择 WinRunner 菜单 栏 Tools 中 的 GUI Map Editor 选 
项 ,启动 GUI Map Editor 窗口 ;选择 Files 菜单 中 的 Open 选项 ,打开 flight4a. gui 文件 。 

(4) 单 击 Test 菜单 中 的 Record-Context Sensitive 选项 ,开始 以 “上 下 文 相 关 ” 
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(Context Sensitive) 模 式 录制 一 个 脚本 。 

(5) 单 击 Flight Reservation 窗口 File 菜单 中 的 Open Order 选项 ,弹出 Open Order 
对 话 框 ;在 Order No. 文本 框 中 输入 数字 5: 表 示 打 开 5 号 订单 ; 单 击 OK 按钮 。 

(6) 单 击 File 菜单 中 的 Fax Order 选项 .打开 Fax Order No. 5 窗口 ,如 图 9-75 
所 示 。 

(7) 单 击 Cancel 按钮 ,关闭 Fax Order No. 5 窗口 ;再 单 击 WinRunner 工具 栏 上 的 
“停止 ?按钮 国 旺 到 .停止 录制 ;保存 sample_6 ,保存 临时 GUI 文件 到 Global GUI Map 文 
件 flight4a. gui。 脚 本 文件 如 图 9-76 所 示 。 


下 FITEhf Reservation 
win_activate (Flight Reservation ) ; 
set_window ("Flight Reservation ，2) ; 
menu_select_item ("File;Open Order...”); 


# Open Order 
set_window ("Open Order”, 1); 
button_set (“Order No.”, ON); 
edit_set ("Edit_1"”, "5"); 
button_press (“Ok”); 

# Flight Reservation 


set_window ("Flight Reservation”, 3); 
menu_select_iten ("File;Fax Order,..”); 


下 Fax Order Wo. 5 


set_window ("Fax Order No. 5", 8); 
button_press ("Cancel”); 


9-75 “Fax Order No. 5 窗口 图 9-76 脚本 文件 内 容 


(8) 在 脚本 的 最 后 一 行 button_press("Cancel") 的 上 方 插入 一 空 行 。 重 新 在 Flight 
Reservation 窗口 中 打开 Fax Order No. 5 窗口 (图 9-75) 。 

(9) 选择 WinRunner 菜单 栏 Insert 中 的 Function , 单 击 For Object/ Window 选项 ， 
出 现 手 形状 光标 。 使 用 手 形状 指针 指向 Fax Order No. 5 窗口 中 的 票数 字段 # Tickets， 
如 图 9-77 所 示 。 


9-77 捕捉 # Tickets 文本 框 


软件 测试 


(10) 单 击 票数 字段 # Tickets, 打 开 函 数 生成 器 窗口 ,如 图 9-78 所 示 ;修改 edit_get_ 
text 函数 中 默认 的 参数 text 为 tickets, 然 后 单 击 Paste 按钮 。 

(11) 同 前 面 的 步骤, 分别 单 击 Ticket Price 字段 ,添加 票 价 查询 字段 ,修改 默认 变量 
名 text 为 price; 单 击 Total 字段 ,添加 票 价 总 额 查询 字段 ,修改 默认 变量 名 text 改 为 
total ,脚本 文件 如 图 9-79 所 示 。 


¥ Far Order No. 5 
set_window ("Fax Order No. 5", 8); 
edit_get_text ("# Tickets:", tickets); 


edit_ get textl"'H Tickets." ticket a | edit_get_text (“Ticket Price:”,price); 


edit_get_text ("Total:", total) ;| 


he Execute | esse | button_press (“Cancel”); 


图 9-78 ”函数 生成 器 窗口 图 9-79 添加 字段 脚本 


(12) 在 脚本 edit_get_text("Total: ",total) 之 后 插入 一 条 件 语句 ,如 图 9-80 所 示 。 
该 条 件 语句 用 来 验证 票 价 总 额 文 本 框 中 的 值 是 否 等 于 票 价 文本 框 的 值 乘 以 票数 文本 框 的 
值 。 如 果 相 符 , 则 通过 测试 ,否则 报错 。 


# Far Order No. 5 
set_window ("Fax Order No. 5", 8); 
edit_get_text ("# Tickets:", tickets) ; 
edit_get_text ("Ticket Price:”,price); 
edit_get_text (“Total:”, total) ; 
if (total==tickets#price) 
tl_step(’Ticket verification”, 0, “total is correct!”); 
else 
tl_step("Ticket verification", 1, total is not correctl”); 


图 9-80 ”添加 条 件 语句 脚本 


(13) 在 工具 栏 上 单 击 按钮 贞 iai 天 运行 该 测试 文件 ,测试 顺利 通过 ,并 显示 如 图 9-81 
所 示 的 测试 结果 。 


和 Tomber bien hechootte 
#¥ Total number of GUI checkpoints: 


[sample_ 5 
[Siep Ticket verlication, Status Pass, Descrption lolal le comectl | 
[ampe 5 


图 9-81 测试 结果 窗口 
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9.6.9 数据 驱动 测试 

在 WinRunner 中 ,可 以 将 测试 脚本 转换 成 数据 驱动 测试 脚本 ,并 建立 一 个 数据 表 , 用 
来 提供 测试 所 需 的 多 组 数据 。 这 样 做 的 目的 是 可 以 用 多 组 不 同 的 数据 去 执行 测试 脚本 。 

当 执 行 数据 驱动 测试 脚本 时 , WinRunner 会 读 取 数 据 表 的 每 一 组 数据 ,然后 分 别 执 
行 。 每 执行 一 次 称 为 一 次 迭代 (Iteration) ,数据 表 有 几 组 数据 ,WinRunner 就 会 进行 几 次 
迭代 。WinRunner 会 在 最 后 的 测试 结果 窗口 中 显示 每 一 次 迭代 的 测试 结果 。 

由 于 篇 幅 所 限 ,不 能 对 数据 驱动 测试 进行 更 深入 的 介绍 , 感 兴趣 的 读者 可 以 参考 其 他 
相关 的 书籍 。 


9.7 小 结 


本 章 介绍 了 自动 化 测试 的 必要 性 、 优 点 .认识 误区 ,原理 和 实施 流程 等 ,介绍 了 主流 的 
测试 工具 ,还 对 著名 的 测试 工具 提供 商 IBM Rational 和 HP Mercury 公司 的 自动 化 测试 
解决 方案 进行 了 介绍 ,最 后 较 详 细 地 介绍 了 如 何 使 用 WinRunner 进行 功能 测试 。 

对 测试 工具 的 了 解 可 以 参看 各 工具 提供 商 的 官方 网 站 及 其 他 相关 网 站 的 资料 。 


习 题 
1. 为 什么 自动 化 测试 是 必须 且 可 行 的 ? 
2. 简 述 自动 化 测试 的 优点 。 
3. 企业 引进 自动 化 测试 后 测试 工作 的 效率 一 定 会 提高 吗 ? 为 什么 ? 
4. 简 述 自动 化 测试 的 实施 流程 。 
5. 什么 是 脚本 ? 脚本 分 为 哪 几 类 ? 各 有 何 作用 ? 
6. 试 谈 谈 你 对 IBM Rational 软件 自动 化 测试 解决 方案 的 认识 。 
7. WinRunner 录制 测试 的 模式 分 别 有 哪 几 种 ? 
8. WinRunner 的 测试 流程 包括 哪些 步 又? 
9. WinRunner 中 的 GUI Map File 模式 有 哪 两 种 ? 它们 有 何 区 别 ? 


10. 为 什么 说 WinRunner 能 实现 回归 测试 ? 谈 谈 你 的 观点 。 
11. 试 根据 本 章 介绍 的 方法 使 用 WinRunner 对 你 开发 的 软件 版 本 进行 测试 ,并 谈 谈 
你 对 WinRunner 的 认识 。 
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软件 质量 和 质量 保证 


本 章 要 点 : 


软件 质量 的 含义 。 

三 个 重要 的 软件 质量 模型 。 

软件 度量 的 含义 和 作用 。 
软件 度量 的 三 个 方面 。 

CMM 的 5 个 等 级 的 含义 。 

CMM 的 逻辑 结构 。 

CMMI 和 CMM 的 异同 点 。 
软件 质量 保证 的 目的 和 工作 内 容 。 
软件 质量 保证 与 测试 的 区 别 。 


在 第 1 章 曾 说 过 ,软件 测试 的 目标 不 仅 是 尽 可 能 多 地 发 现 软件 中 的 错误 ,还 要 对 软件 
质量 进行 度量 和 评估 ,以 提高 软件 质量 。 

为 了 能 够 定量 地 对 软件 产品 进行 度量 和 评估 ,一 系列 的 软件 质量 模型 被 提出 了 。 它 
们 使 软件 开发 企业 在 提升 自己 的 软件 过 程 能 力 及 开发 能 力 时 ,有 据 可 依 ,并 能 获得 指导 。 

本 章 介 绍 了 与 软件 测试 密切 相关 的 一 些 概 念 或 活动 : 软件 质量 .软件 质量 模型 .软件 
度量 、 软 件 能 力 成 熟 度 模型 及 能 力 成 熟 度 模型 集成 .ISO 9000 标准 、 软 件 质 量 保证 
(SQA) 等 。 


10.1 软件 质量 


10.1.1 软件 质量 的 含义 
首先 来 看 一 些 关于 质量 的 定义 。 
。 1970 年 ,Juran 和 Gryna 把 质量 定义 为 “ 适 于 使 用 ”。 
。 1979 年 ,Crosby 将 质量 定义 为 “符合 需求 ”。 
。 在 GB/T 6583-ISO 8404(1994 版 ) 中 ,将 质量 定义 为 “反映 实体 满足 明确 和 隐 含 需 
要 的 能 力 的 特性 的 总 和 ”, 这 里 的 实体 是 “可 以 单独 描述 和 研究 的 事物 ”, 如 产品 、 
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活动 .过 程 、. 组 织 的 体系 等 。 

。 在 ISO 9000: 2000 中 ,将 质量 定义 为 “一 组 固有 特性 满足 要 求 的 程度 ”。 

至 于 软件 质量 ,很 容易 从 上 述 质量 的 定义 进行 扩展 。IEEE 对 软件 质量 的 定义 是 , 软 
件 质量 是 系统 .部件 或 过 程 满足 顾客 或 者 用 户 需 要 或 期 望 的 程度 ,以 及 系统 .部 件 或 过 程 
满足 规定 需求 的 程度 。 
10.1.2 软件 质量 模型 

实际 上 ,不 同 的 人 从 不 同 的 角度 来 看 软件 质量 ,会 有 不 同 的 理解 。 从 用 户 的 角度 看 ， 
质量 就 是 满足 客户 的 需求 ;从 开发 者 的 角度 看 ,质量 就 是 与 需求 说 明 保 持 一 致 ;从 产品 的 
角度 看 ,质量 就 是 产品 的 内 在 特点 ;从 价值 的 角度 看 ,质量 就 是 客户 是 否 愿意 购买 。 

因此 ,为 了 避免 软件 质量 评价 的 盲目 性 ,需要 制定 软件 质量 模型 ,从 多 方面 .客观 地 、 
定量 地 对 软件 质量 进行 度量 和 评价 。 

目前 已 有 很 多 种 软件 质量 模型 ,它们 分 别 定义 了 不 同 的 软件 质量 属性 。 比 较 常 见 的 
三 个 软件 质量 模型 是 McCall 模型 .Boehm 模型 和 ISO 9126。 

McCall 模型 是 McCall 等 在 1977 年 提出 的 ,如 图 10-1 所 示 。 


产品 修订 


正确 性 可 靠 性 可 用 性 完整 性 功效 
图 10-1 McCall 质量 模型 


McCall 质量 模型 将 软件 质量 分 为 三 个 重要 的 方面 : 操作 特性 (产品 运行 ) 、 承 受 可 改 
变 能 力 (产品 修订 ) 和 新 环境 适应 能 力 (产品 变迁 ) 。 

Boehm 模型 是 Boehm 等 1978 年 提出 的 ,如 图 10-2 所 示 。 

Boehm 质量 模型 是 一 个 分 层 的 模型 ,除了 包含 用 户 的 期 望 和 需要 , 它 还 包含 了 
McCall 模型 所 没有 的 硬件 质量 特性 。 

Boehm 质量 模型 关注 不 同类 型 的 用 户 需 要 。 第 一 类 用 户 是 初始 用 户 , 第 二 类 用 户 是 
要 将 软件 移植 到 其 他 软 硬 件 系统 中 使 用 的 用 户 ,第 三 类 用 户 是 系统 维护 人 员 。 也 可 以 说 ， 
Boehm 质量 模型 反映 了 不 同类 型 的 用 户 对 软件 质量 的 理解 。 

1991 年 ,国际 标准 化 组 织 (International Standards Organization ,ISO) 颁布 了 ISO 
9126 一 1991 标准 《软件 产品 评价 一 质量 特性 及 其 使 用 指南 》。 我 国 也 于 1996 年 颁布 了 同 
样 的 软件 产品 质量 评价 标准 GB/T 16260 一 1996。ISO 9126 模型 如 图 10-3 所 示 。 

ISO 9126 模型 定义 了 6 个 影响 软件 质量 的 质量 特性 ,每 个 质量 特性 又 可 通过 若干 子 
特性 来 测量 ,每 个 子 特性 在 评价 时 要 进行 定义 并 实施 若干 度量 。 

ISO 9126 质量 模型 使 得 软件 最 大 限度 地 满足 用 户 明 确 的 和 潜在 的 需求 , 且 从 用 户 、 
开发 人 员 ,管理 者 等 各 类 人 员 的 角度 全 方位 地 考虑 软件 质量 。 


J 
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设备 独立 性 


可 多 从 三 | 上， 


可 修改 性 
可 扩充 以 
图 10-2 ”Boehm 质量 模型 

特性 。 ” 子 特 性 特 竹 。 子 特性 
一 适合 性 3 时 间 特 性 

| 准确 性 效率 上 资源 特 人 

工 能 作 |- 互 操作 性 一 易 分 析 性 
| 依从 性 |- 易 更 改 性 

L_ 安全 性 可 维护 性 门 _ 稳 定性 

一 成 熟 性 上 易 测试 性 

可 靠 性 ”| 容错 性 一 适应 性 
上 _ 易 恢 复 性 上 易 安装 外 

一 易 理 解 性 可 移植 性 | -一 臻 性 

易 使 用 性 -易学 习性 L_ 易 基 换 性 

[ 易 操 作 人 


图 10-3 ISO 9126 质量 模型 


10.2 软件 度量 


10.2.1 软件 度量 概述 


1. 软件 度量 的 含义 
在 10. 1 节 介绍 软件 质量 模型 时 , 曾 多 次 讲 到 度量 , 究 竞 什么 是 度量 呢 ? 
度量 的 正式 定义 是 : 度量 是 指 在 现实 的 世界 中 把 数字 或 符号 指定 给 实体 的 某 一 属 
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性 ,以 便 以 这 种 方式 来 根据 已 明确 的 规则 描述 它们 。 

从 该 定义 可 以 看 出 ,度量 关注 的 是 获取 关于 实体 属性 的 信息 。 

那么 什么 是 软件 度量 呢 ? 软件 度量 (Software Measurement) 是 对 软件 开发 项 目 、 过 
程 及 其 产品 进行 数据 定义 ,收集 以 及 分 析 的 持续 性 量化 过 程 ,目的 在 于 对 项 目 质量 .过 程 
质量 及 产品 质量 进行 理解 预测, 评估、 控制 和 改善 。 

软件 度量 或 者 说 软件 工程 度量 领域 是 一 个 在 过 去 30 多 年 研究 非常 活跃 的 软件 工程 
领域 。 目 前 ,软件 研究 人 员 及 从 业 人 员 提 出 了 上 千 种 软件 度量 方法 。 


2. 软件 度量 的 意义 

在 软件 开发 中 ,软件 度量 的 根本 目的 是 为 了 软件 管理 的 需要 ,利用 度量 来 改进 软件 过 
程 ,以 提高 软件 开发 效率 和 软件 质量 。 人 们 是 无 法 管理 不 能 度量 的 事物 的 。 通 过 软件 度 
量 , 使 人 们 能 够 可 预测 、 可 重复 、 准 确 地 控制 软件 开发 过 程 和 软件 产品 。 

度量 使 得 对 软件 质量 的 评价 从 定性 走向 定量 ,避免 了 软件 质量 评价 的 模糊 性 。 


3. 软件 度量 的 现状 

在 软件 界 , 目 前 软件 度量 的 情况 并 不 尽 如 人 意 , 如 下 一 些 现象 时 常 存在 : 

(1) 设计 和 开发 软件 产品 的 时 候 ,并 未 制定 出 度量 的 目标 。 例 如 ,软件 开发 机 构 保 证 
将 使 软件 的 用 户 界面 友好 、 可 靠 、 易 于 维护 ,而 并 未 使 用 度量 的 术语 来 详细 说 明 它们 的 具 
体 含 义 。Gilb 曾经 说 过 : 所 谓 模糊 目标 定理 ,就 是 没有 明确 目标 的 项 目 将 不 能 明确 地 达 
到 它 的 目标 。 

(2) 未 能 对 构成 软件 项 目 实际 费用 的 各 个 不 同 部 分 进行 有 效 的 度量 。 例 如 ,通常 开 
发 团队 并 不 知道 ,与 测试 阶段 相 比 ,设计 阶段 花费 的 时 间 是 多 少 。 

(3) 由 于 缺乏 清晰 的 度量 目标 ,使 得 开发 人 员 不 能 使 开发 的 产品 质量 的 各 方面 特性 
都 合格 ,因此 不 能 使 用 术语 向 潜在 的 用 户 说 明 软 件 产品 具有 很 高 的 质量 。 例 如 ,在 一 段 时 
间 里 使 用 故障 的 可 能 性 、 把 产品 安装 到 新 环境 中 需 花 费 的 工作 量 等 。 

(4) 由 于 缺乏 对 软件 的 度量 ,看 不 到 清晰 的 实效 ,因而 人 们 对 所 使 用 的 软件 开发 技术 
没有 足够 的 信心 ,总 是 试图 说 服 自己 使 用 另 一 种 新 的 技术 进行 软件 开发 。 

事实 上 ,目前 人 们 在 软件 度量 方面 做 的 工作 一 般 较 少 ,而 且 所 做 的 度量 方面 的 工作 也 
与 一 般 科 学 意义 上 的 度量 存在 很 大 距离 。 人 们 经 常会 看 到 诸如 此 类 的 话 :“ 软 件 的 费用 
有 80% 花 费 在 维护 上 ”, 或 “软件 每 一 千 行 程序 中 平均 有 55 个 bugs”, 但 并 不 能 知道 这 些 
结论 是 怎样 产生 的 ,试验 是 怎样 设计 并 执行 的 ,度量 的 是 哪个 实体 ,以 及 错误 的 框架 是 什 
么 等 。 没 有 这 些 东 西 , 就 不 能 在 自己 的 环境 中 客观 地 进行 反复 度量 、 重 现 度量 的 结果 以 获 
得 与 工业 标准 的 真实 比较 。 


4. 软件 度量 工具 

随 着 软件 定量 方法 的 重要 性 不 断 增 加 ,市 场 上 出 现 了 许多 度量 工具 。 然 而 ,度量 工具 
目前 还 是 很 混乱 。 因 为 没有 统一 的 度量 标准 规范 ,每 种 工具 发 明 商 家 都 是 按照 他 们 自己 
的 软件 度量 规范 。Daich 等 根据 分 类 学 把 度量 工具 分 成 了 以 下 几 种 : 

。 通用 度量 工具 。 

。 小 生境 度量 工具 (Niche Metrics Tool) 。 


到 
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。 苦 态 分 析 工 具 。 

。 源 代码 静态 分 析 工具 。 

。 规模 度量 工具 。 
10.2.2 软件 度量 的 目标 

度量 活动 必须 有 明确 的 目标 或 目的 ,而 正 是 这 决定 着 我 们 选择 哪 种 属性 和 实体 进行 
度量 。 这 个 目标 与 软件 开发 、 使 用 时 所 涉及 的 人 员 的 层次 有 关 。 

下 面 主要 从 管理 者 和 软件 工程 师 两 种 角度 考虑 ,为 了 达到 各 种 目标 所 要 进行 的 度量 
工作 。 


1. 对 管理 者 

(1) 需要 度量 软件 开发 过 程 中 不 同 阶段 的 费用 。 

例如 ,度量 开发 整个 软件 系统 的 费用 (包括 从 需求 分 析 阶 段 到 发 布 之 后 的 维护 阶段 ) 。 
必须 清楚 这 个 费用 以 决定 在 保证 一 定 利润 的 情况 下 的 价格 。 

(2) 为 了 决定 付 给 不 同 的 开发 小 组 的 费用 ,需要 度量 不 同 小 组 职员 的 生产 率 。 

(3) 为 了 对 不 同 的 项 目 进行 比较 ,对 将 来 的 项 目 进行 预测 ,建立 基线 及 设 定 合理 的 改 
进 目 标 等 ,需要 度量 开发 产品 的 质量 。 

(4) 需要 决定 项 目的 度量 目标 。 例 如 ,应 达到 多 大 的 测试 覆盖 率 , 系统 最 后 的 可 靠 性 
应 有 多 大 等 。 

(5) 为 了 找 出 是 什么 因素 影响 费用 和 生产 率 , 需 要 反复 测试 某 一 特定 过 程 和 资源 的 
属性 。 

(6) 需要 度量 和 估计 不 同 软件 工程 方法 和 工具 的 效用 ,以 便 决 定 是 否 有 必要 把 它们 
引进 公司 。 

2. 对 软件 工程 师 

(1) 需要 制定 过 程度 量 以 监视 不 断 演进 的 系统 。 这 包括 设计 过 程 中 的 改动 ,在 不 同 
的 回顾 或 测试 阶段 发 现 的 错误 等 。 

(2) 需 使 用 严格 的 度量 术语 来 指定 对 软件 质量 和 性 能 的 要 求 , 以 便 使 这 些 要 求 是 可 
测试 的 。 例 如 ,系统 必须 “可 靠 ”, 可 用 如 下 更 具体 的 文字 加 以 描述 :“ 平 均 错 误 时 间 必 须 
夫 于 15 个 CP 时间 片 。” 

(3) 为 了 合格 需要 度量 产品 和 过 程 的 属性 。 例 如 ,一 个 产品 是 否 合 格 要 看 该 产品 的 
一 些 可 度量 的 特性 ,如 “8B 测试 阶段 少 于 20 个 错误 ”,“ 每 个 模块 的 代码 行 不 超过 100 行 ”， 
以 及 开发 过 程 的 一 些 属性 ,如 “单元 测试 必须 覆盖 90% 以 上 的 用 例 ” 等 

(4) 需要 度量 当前 已 存在 的 产品 和 过 程 的 属性 ,以 便 预测 将 来 的 产品 。 例 如 : 

。 通过 度量 软件 规格 说 明 书 的 文档 大 小 来 预测 目标 软件 的 大 小 。 

。 通过 度量 设计 文档 的 结构 特性 来 预测 将 来 维护 的 盲点 。 

。 通过 度量 测试 阶段 的 软件 的 可 靠 性 来 预测 软件 今后 操作 .运行 的 可 靠 性 。 

研究 上 面 列 出 的 度量 目标 和 活动 可 以 发 现 .软件 度量 的 目标 可 大 致 概括 为 以 下 两 类 : 

@ 使 用 度量 来 进行 估计 。 这 使 得 人 们 可 以 同步 地 跟踪 一 个 特定 的 软件 项 目 。 

@ 应 用 度量 来 预测 项 目的 一 些 重要 的 特性 。 注 意 ,不 能 过 分 夸大 这 些 预测 的 作用 ， 
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因为 它们 并 不 是 完全 正确 的 。 
10.2.3 软件 度量 的 内 容 
软件 度量 贯穿 于 软件 开发 的 整个 生命 周期 ,是 软件 开发 过 程 中 进行 理解 .预测 .评估 、 
控制 和 改善 的 重要 载体 。 软 件 度量 包括 项 目 度量 、 产 品 度量 和 过 程度 量 三 个 方面 ,如 
表 10-1 所 示 。 
表 10-1 软件 度量 的 具体 内 容 


度量 维度 侧 重 点 具体 内 容 
理解 和 控制 当前 项 目的 情况 和 | 规模 ,成 本 ,工作 车, 进度 ,生产 旋 ,风险 ,顾客 消 
项 目 度量 关 
状态 意 度 
产品 度量 | 理解 和 控制 当前 产品 的 质量 rt 
过 各 度 个 。 | 理解 和 控制 当前 的 情况 和 状态 ,对 | 能 力 成 训 度 ,管理 ,生命 周期 生产率, 隔 共 
过 程 进行 改进 和 预测 入 率 
1. 项 目 度量 


项 目 度量 侧重 于 理解 和 控制 整个 软件 项 目的 情况 和 状态 ,主要 从 软件 项 目的 规模 、 成 
本 .工作 量 .进度 .生产力 风险 .顾客 满意 度 等 方面 进行 度量 。 

(1) 规模 度量 

软件 开发 项 目的 规模 度量 (Size Measurement) 是 估算 软件 项 目 工 作 量 、 编 制 成 本 预 
算 .策划 合理 的 项 目 进 度 的 基础 。 

有 效 的 软件 规模 度量 是 项 目 成 功 的 核心 要 素 。 这 是 因为 基于 有 效 的 软件 规模 度量 可 
以 策划 合理 的 软件 项 目 计 划 ,合理 的 项 目 计 划 则 有 助 于 有 效 地 对 项 目 进行 管理 。 

软件 规模 度量 的 要 点 如 下 : 

Q@ 由 开发 现场 的 项 目 成 员 进 行 估算 。 

@ 灵活 运用 实际 开发 作业 数据 。 

@ 杜绝 盲目 迎合 顾客 需求 的 “ 交 期 逆 推 法 ”。 

软件 规模 度量 有 助 于 软件 开发 团队 准确 地 把 握 开发 时 间 、 费 用 分 布 及 缺陷 密度 等 。 
软件 规模 的 估算 方法 有 很 多 种 ,例如 功能 点 分 析 (Function Points Analysis,FPA) ,代码 
行 (Lines of Code,LOC) ,德尔 菲 法 (Delphi Technique) ,COCOMO 模型 ,特征 点 (Feature 
Point) ,对 象 点 (Object Point) ,3-D 功能 点 (3-D Function Points) ,Bang 度量 (DeMarco’s 
Bang Metric) ,模糊 逻辑 (Fuzzy Logic) ,标准 构件 法 (Standard Component) 等 ,这 些 方法 
不 断 细 化 为 更 多 具体 的 方法 。 

(2) 成 本 度量 

软件 开发 的 成 本 度量 主要 指 软 件 开发 项 目 所 需 财务 性 成 本 的 估算 ,主要 方法 如 下 : 

@ 类 比 估算 法 。 类 上 比 估算 法 是 通过 比较 已 完成 的 类 似 项 目 系统 来 估算 成 本 。 它 适 
合 于 评估 一 些 与 历史 项 目 在 应 用 领域 .环境 和 复杂 度 方面 相似 的 项 目 。 其 约束 条 件 是 必 
须 存 在 类 似 的 ,具有 可 比 性 的 软件 开发 系统 ,估算 结果 的 精确 度 依赖 于 历史 项 目 数据 的 完 
整 性 ,准确 度 ,以 及 现行 项 目 与 历史 项 目的 近似 程度 。 
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@ 细 分 估算 法 。 细 分 估算 法 是 将 整个 项 目 系统 分 解 成 若干 个 小 系统 ,逐个 估算 成 
本 ,然后 合计 起 来 作为 整个 项 目的 估算 成 本 。 细 分 估算 法 通过 逐渐 细 化 的 方式 对 每 个 小 
系统 进行 详细 的 估算 ,可 能 获得 贴近 实际 的 估算 成 本 。 其 难点 在 于 难以 把 握 各 小 系统 整 
合 为 大 系统 的 整合 成 本 。 

@ 周期 估算 法 。 周 期 估算 法 是 按 软件 开发 周期 进行 划分 ,估算 各 个 阶段 的 成 本 , 然 
后 进行 汇总 合计 。 周 期 估算 法 基于 软件 工程 理论 对 软件 开发 的 各 个 阶段 进行 估算 ,适合 
于 瀑布 型 软件 开发 方法 ,但 是 需要 估算 者 对 软件 工程 各 个 阶段 的 作业 量 和 相互 间 的 比例 
具有 相当 的 了 解 。 

(3) 顾客 满意 度 度量 

顾客 满意 是 软件 开发 项 目的 主要 目的 之 一 ,而 顾客 满意 目标 要 得 以 实现 ,需要 建立 顾 
客 满意 度 度 量 体 系 和 指标 ,对 顾客 满意 度 进行 度量 。 顾 客 满 意 度 指标 (Customer 
Satisfaction Index,CSD) 以 顾客 满意 度 研究 为 基础 ,对 顾客 满意 度 加 以 界定 和 描述 。 

项 目 顾 客 满意 度量 的 要 点 是 ,确定 各 类 信息 、 数 据 、 资 料 来 源 的 准确 性 、 客 观 性 ,合理 
性 和 有 效 性 ,并 以 此 建立 产品 、 服 务 质量 的 衡量 指标 和 标准 。 

Stephen H. Kan 在 《软件 质量 工程 的 度量 与 模型 》(Metrics and Models in Software 
Quality Engineering) 一 书 中 描述 的 企业 的 顾客 满意 度 要 素 及 其 内 容 如 表 10-2 所 示 。 


表 10-2 顾客 满意 度 要 素 及 其 内 容 


顾客 满意 度 要 素 顾客 满意 度 要 素 的 内 容 

技术 解决 方案 质量 ,可 靠 性 ,有 效 性 , 易 用 性 ,价格 ,安装 ,新 技术 
支持 与 维护 灵活 性 , 易 达 性 ,产品 知识 

市 场 营销 解决 方案 ,接触 点 ,信息 

管理 购买 流程 ,请 求 手续 ,保证 期 限 ,注意 事项 

交付 准时 ,准确 ,交付 后 过 程 

企业 形象 技术 领导 ,财务 稳定 性 ,执行 印象 


作为 企业 的 顾客 满意 度 的 基本 构成 单位 ,项 目的 顾客 满意 度 会 受到 项 目 要 素 的 影响 ， 
主要 包括 开发 的 软件 产品 开发 文档 、 项 目 进度 及 交付 期 .技术 水 平 、 沟 通 能 力 、 运 用 维护 
等 。 具 体 而 言 , 可 细 分 为 如 表 10-3 所 示 的 度量 要 素 ,并 可 根据 这 些 要 素 进行 度量 。 


表 10-3 顾客 满意 度 项 目的 度量 要 素 


顾客 满意 度 项 目 顾客 满意 度 度量 要 素 

软件 产品 功能 性 .可 靠 性 . 易 用 性 ,效率 性 ,可 维护 性 ,可 移植 性 

开发 文档 文档 的 构成 ,质量 ,外 观 , 图 表 及 索引 .用 语 

项 目 进度 及 交付 期 交付 期 的 根据 ,进度 迟延 情况 下 的 应 对 ,进展 报告 

技术 水 平 项 目 组 的 技术 水 平 ,项 目 组 的 提案 能 力 ,项 目 组 的 问题 解决 能 力 
沟通 能 力 事件 记录 ,式样 确认 .Q&A 

运用 维护 支持 ,问题 发 生 时 的 应 对 速度 .问题 解决 能 力 
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2. 产品 度量 

软件 产品 的 度量 主要 针对 于 作为 软件 开发 成 果 的 软件 产品 的 质量 而 言 , 独 立 于 其 过 
程 。 软 件 的 质量 由 一 系列 质量 要 素 组 成 ,每 一 个 质量 要 素 由 一 些 衡 量 标准 组 成 ,每 个 衡量 
标准 又 由 一 些 量度 标准 加 以 定量 刻画 。 质 量度 量 贯穿 于 软件 工程 的 全 过 程 及 软件 交付 之 
后 ,在 软件 交付 之 前 的 度量 主要 包括 程序 复杂 性 、 模 块 的 有 效 性 和 总 的 程序 规模 ,在 软件 
交付 之 后 的 度量 则 主要 包括 残存 的 缺陷 数 和 系统 的 可 维护 性 。 

前 面 介 绍 过 的 软件 质量 模型 实际 上 就 是 软件 产品 度量 的 依据 ,如 McCall 质量 模型 、 
Boehm 质量 模型 及 ISO 9126 质量 模型 。 这 些 模型 指出 了 对 于 模型 中 的 每 一 个 质量 要 素 
具体 的 度量 标准 ,可 用 来 定量 地 评价 软件 产品 的 质量 ,在 此 不 详细 介绍 。 


3. 过程 度量 

过 程度 量 是 对 软件 开发 流程 各 个 方面 进行 的 度量 ,目的 在 于 预测 过 程 的 未 来 性 能 , 减 
少 过 程 结果 的 偏差 ,对 软件 过 程 的 行为 进行 目标 管理 ,为 过 程控 制 , 过 程 评价 及 持续 改善 
提供 定量 基础 。 

软件 过 程 质量 的 好 坏 将 直接 影响 软件 产品 质量 的 好 坏 ,度量 并 评估 过 程 ,提高 过 程 成 
熟 度 可 以 改进 产品 质量 。 相 反 ,度量 并 评估 软件 产品 质量 会 为 提高 软件 过 程 质量 提供 必 
要 的 反馈 和 依据 。 

软件 过 程度 量 主要 包括 以 下 三 方面 的 内 容 。 

(1) 成 熟 度 度量 (Maturity Metrics) 

主要 包括 组 织 度量 ,资源 度量 、 培 训 度 量 、 文 档 标准 化 度量 ,数据 管理 与 分 析 度 量 、 过 
程 质 量度 量 等 。 

(2) 管理 度量 (Management Metrics) 

主要 包括 项 目 管理 度量 (如 里 程 碑 管理 度量 、 风 险 度 量 、 作 业 流 程度 量 、 控 制度 量 、 管 
理 数 据 库 度量 等 ) .质量 管理 度量 (如 质量 审查 度量 、 质 量 测试 度量 、 质 量 保证 度量 等 ), 配 
置 管 理 度量 (如 式样 变更 控制 度量 、 版 本 管理 控制 度量 等 )。 

(3) 生命 周期 度量 (Life Cycle Metrics) 

主要 包括 问题 定义 度量 .需求 分 析 度 量 .设计 度量 ,制造 度量 .维护 度量 等 。 


10.3 软件 能 力 成 熟 度 模型 


10. 3.1 软件 能 力 成 熟 度 模型 概述 


1. 软件 能 力 成 熟 度 模型 的 起 源 

早 在 20 世纪 70 年 代 中 期 ,美国 国防 部 就 组 织 力 量 研究 软件 项 目 失 败 的 原因 ,发 现在 
失败 的 软件 项 目 中 ,70% 是 由 于 管理 不 善 所 造成 的 ,因而 得 出 这 样 的 结论 : 管理 影响 软件 
项 目的 全 局 ,而 技术 只 影响 项 目的 局 部 。 随 后 ,在 美国 掀起 了 研究 软件 管理 技术 的 热潮 。 

为 了 系统 地 解决 软件 项 目 管理 问题 ,美国 国防 部 于 1984 年 在 卡 内 基 ， 梅 隆 大 学 建立 
了 软件 工程 研究 所 。 卡 内 基 ， 梅 隆 大 学 软件 工程 研究 所 CMU/SEI(Carnegie Mellon 
University/ Software Engineering Institute) 于 1987 年 研究 发 布 了 软件 过 程 成 熟 度 框架 ， 


软件 测试 


并 提供 了 软件 过 程 评 估 和 软件 能 力 评价 两 种 评估 方法 和 软件 成 熟 度 提 问 单 。4 年 之 后 ， 
SEI 将 软件 过 程 成 熟 度 框架 进化 为 软件 能 力 成 熟 度 模型 (Capability Maturity Model For 
Software,SW-CMM) ,并 发 布 了 最 早 的 SW-CMM 1.0 版 。 经 过 两 年 的 试用 ,1993 年 SEI 
正式 发 布 了 SW-CMM 1. 1 版 ,这 是 目前 使 用 最 为 广泛 的 版 本 。SW-CMM 通常 简称 
为 CMM。 


2. 软件 能 力 成 熟 度 模型 中 的 重要 概念 

在 对 CMM 深入 介绍 前 , 先 介绍 如 下 概念 。 

(1) 过 程 (Process) 

CMM 中 引用 了 IEEE 对 过 程 的 定义 , 即 过 程 是 “为 达到 目的 而 执行 的 所 有 步骤 的 
系列 ”。 

(2) 软件 过 程 (Software Process) 

指 人 们 用 于 开发 和 维护 软件 及 其 相关 产品 的 一 系列 活动 方法、 实践 和 革新 。 软 件 和 
其 相关 产品 是 指 项 目 计 划 、 需 求 文档 ,设计 文档 ,代码 ,测试 用 例 、 用 户 手册 等 。 

(3) 软件 过 程 能 力 (Software Process Capability) 

在 遵循 一 个 软件 过 程 后 能 得 到 的 预期 结果 的 范围 。 它 可 用 来 预测 一 个 机 构 在 承接 一 
个 软件 项 目 后 ,所 能 得 到 的 最 可 能 的 结果 。 

(4) 软件 过 程 性 能 (Software Process Performance) 

在 遵循 一 个 软件 过 程 后 所 得 到 的 实际 结果 。 

(5) 软件 过 程 成 熟 度 (Software Process Maturity) 

一 个 具体 的 软件 过 程 被 明确 定义 、 管 理 .评价 ,控制 和 产生 实效 的 程度 。 所 谓 成 熟 度 ， 
包含 着 能 力 的 一 种 增长 潜力 ,同时 也 表明 了 软件 机 构 实施 软件 过 程 的 实际 水 平 。 


3. 软件 能 力 成 熟 度 模型 的 作用 
软件 能 力 成 熟 度 模 型 CMM 融合 了 全 面 质量 管理 的 思想 ,是 一 个 率先 在 软件 行业 从 
软件 过 程 能 力 的 角度 提出 的 软件 评估 标准 ,通过 它 能 够 评价 一 个 软件 机 构 的 开发 过 程 的 
成 熟 度 。 
CMM 的 目的 是 帮助 软件 企业 对 软件 过 程 进行 管理 和 改进 ,增强 开发 与 改进 能 力 ,从 
而 高 效率 地 开发 出 高 质量 的 软件 。CMM 已 成 为 业界 事实 上 的 软件 过 程 的 工业 标准 。 
企业 实施 CMM 模型 并 评估 可 为 企业 带 来 许多 好 处 。 例 如 : 
指导 软件 机 构 提 高 软件 开发 管理 能 力 ; 
。 降低 软件 承包 商 和 采购 者 的 风险 ; 
。 评估 软件 承包 商 的 软件 开发 管理 能 力 ; 
。 帮助 软件 企业 识别 开发 和 维护 软件 的 有 效 过 程 和 关键 实践 
帮助 软件 企业 识别 为 达到 CMM 更 高 成 熟 等 级 所 必须 的 关键 实践 
增加 软件 企业 的 国际 竞争 能 力 。 
4. 软件 能 力 成 熟 度 模型 的 5 个 等 级 


CMM 将 软件 过 程 的 成 熟 度 分 为 5 个 等 级 ,如 图 10-4 所 示 。 
表 10-4 列 出 了 CMM 中 各 个 等 级 的 软件 机 构 的 特征 。 
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图 10-4 软件 过 程 成 熟 度 的 5 个 等 级 


表 10-4 CMM 中 各 等 级 软件 机 构 的 特征 
特 征 


初始 级 (第 1 级 ) 


@ 对 过 程 几乎 没有 定义 .导致 软件 过 程 混乱 无 序 、 无 法 预测 和 控制 
@ 项 目的 成 功 依靠 个 人 的 能 力 和 行为 
@ 管理 方式 属于 反应 式 


可 重复 级 (第 2 级 ) 


@ 管理 制度 化 ,工作 有 章 可 循 

@ 开发 工作 初步 实现 标准 化 

@ 变更 基线 化 

@ 过 程 可 跟踪 

@ 新 项 目 计划 和 管理 基于 过 去 的 实践 经 验 , 具 有 重复 以 前 成 功 项 目的 环境 和 条 件 


已 定义 级 (第 3 级 ) 


@ 开发 过 程 标准 化 、 文 档 化 

@ 完善 的 培训 和 专家 评审 制度 

@ 技术 和 管理 活动 稳定 实施 

@ 项 目 质量 、 进 度 和 费用 可 控制 

@ 项 目 过 程 . 岗 位 和 职责 均 有 共同 的 理解 


已 管理 级 (第 4 级 ) 


@ 产品 和 过 程 有 定量 的 质量 目标 

四 过 程 的 生产 率 和 质量 可 度量 

回 有 过 程 数据 库 

@ 实现 项 目 产品 和 过 程 的 控制 

@@ 过 程 和 产品 质量 趋势 可 预测 , 若 预 测 有 偏差 ,可 以 及 时 纠正 


优化 级 (第 5 级 ) 


@ 不 断 改进 过 程 , 采 用 新 技术 .新 方法 
@ 有 防止 缺陷 .识别 薄弱 环节 并 加 以 改进 的 手段 
@ 可 通过 反馈 获得 过 程 有 效 性 的 统计 数据 ,并 进行 分 析 , 以 改善 过 程 


在 CMM 中 ,等 级 越 高 ,软件 开发 生产 精度 越 高 ,每 单位 工程 的 生产 周期 也 越 短 。 

在 CMM 的 5 个 等 级 中 ,除了 初始 级 ,其 他 4 个 等 级 均 有 若干 个 指导 软件 机 构 改 进 
软件 过 程 的 要 点 , 称 为 关键 过 程 域 (Key Process Area, KPA)。 一 个 软件 机 构 , 如 果 和 希望 
达到 某 一 个 成 熟 度 等 级 ,就 必须 完全 满足 关键 过 程 域 所 规定 的 不 同 要求 , 即 满足 每 个 
关键 过 程 域 的 目标 。 所 谓 关键 过 程 域 ,是 指 一 系列 相互 关联 的 操作 活动 ,这 些 活动 反 
上映 了 一 个 软件 机 构 改进 过 程 中 必须 集中 精力 改进 的 方面 。 只 有 一 个 软件 机 构 的 所 有 
项 目 都 达到 某 个 关键 过 程 域 的 目标 ,该 软件 机 构 以 该 关键 过 程 域 为 特征 的 过 程 能 力 才 


是 规范 化 的 。 


在 CMM 中 一 


共有 18 个 关键 过 程 域 ,分 布 在 2 一 5 级 中 。 表 10-5 列 出 了 CMM 中 各 


等 级 对 应 的 关键 过 程 域 和 主要 活动 。 


表 10-5 CMM 中 各 等 级 对 应 的 关键 过 程 域 和 主要 活动 


关键 过 程 域 


主要 活动 


无 
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Qa 需求 管理 (Requirement Management, RM): 在 客户 和 软件 
项 目 之 间 达 成 对 客户 需求 的 一 致 理解 

@ 软件 项 目 策划 (Software Project Planning,SPP): 为 软件 工 
程 和 项 目 管理 建立 一 个 合理 的 计划 

@ 软件 项 目 跟踪 和 监控 (Software Project Tracking and Oversight， 
SPTO): 使 管理 者 对 实际 的 软件 项 目 进展 过 程 有 足够 的 了 解 ， 
以 在 项 目 效能 偏离 计划 较 多 时 能 够 采取 有 效 措 施 

@ 软件 子 合同 管理 (Software Subcontract Management,SSMD) : 
选择 合格 的 分 包 商 ,并 有 效 管理 之 

@ 软件 质量 保证 (Software Quality Assurance, SQA): 对 软件 项 
目 过 程 及 其 间 生产 的 各 个 产品 进行 监管 以 保证 最 终 软 件 质量 

@ 软件 配置 管理 (Software Configuration Management,SCMD : 在 
整个 软件 生命 周期 里 建立 并 维护 软件 项 目的 工作 产品 的 完 
整 性 。 


主要 涉及 建立 软件 项 
目 管理 控制 方面 的 
活动 


Oz 组 织 过 程 聚焦 (Organization Process Focus, OPF): 确立 机 
构 对 于 改进 机 构 的 软件 过 程 能 力 的 软件 过 程 活动 的 责任 

@ 组 织 过 程 定义 (Organization Process Definition,OPD): 开发 
和 维护 一 组 有 用 的 软件 过 程 资产 ,提供 一 个 用 于 定义 定量 过 
程 管理 的 有 意义 的 数据 的 基础 

加 培训 大 岗 (Training Program,TP): 开发 个 体 的 技能 和 知识 ， 
以 使 他 们 能 够 更 好 地 扮演 自己 的 角色 

@ 集成 软件 管理 (Integrated Software Management,ISM) : 基 
于 业务 环境 和 项 目的 技术 需要 ,从 机 构 的 标准 软件 过 程 和 相 
关 的 过 程 资产 经 过 剪裁 ,将 软件 工程 和 管理 活动 集成 为 一 个 
有 机 的 定义 的 软件 过 程 

加 组 间 协 调 (Intergroup Coordination ,IC) : 确立 软件 工程 组 主 
动 介 入 其 他 工程 组 以 便 项 目 能 更 好 地 满足 客户 要 求 的 手段 

@ 软件 产品 工程 (Software Product Engineering,SPE) : 一 致 地 
完成 定义 良好 的 工程 过 程 , 它 描述 了 项 目的 技术 活动 ,如 需 
求 分 析 、 设 计 、 编 码 和 测试 

@ 同行 评审 (Peer Reviews, PR): 通过 同行 专家 ,尽早 且 有 效 
地 排除 软件 产品 中 的 缺陷 


主要 涉及 项 目 和 组 
织 的 策略 ,使 软件 组 
织 建立 起 对 项 目 中 
的 有 效 计划 和 管理 
过 程 的 内 部 细节 


已 管理 级 


Oz 定量 过 程 管理 (Quantitative Process Management, QPM): 
定量 地 控制 软件 项 目的 过 程 效 能 

@ 软件 质量 管理 (Software Quality Management, SQM): 定量 
了 解 软件 产品 的 质量 ,并 达到 既定 的 质量 目标 


主要 的 任务 是 为 软 
件 过 程 和 软件 产品 
建立 一 种 可 以 理解 
的 定量 的 方式 


优化 级 


@ 过 程 变更 管理 (Process Change Management,PCM) : 连续 改 
进 机 构 所 采用 的 软件 过 程 , 以 改进 软件 质量 ,提高 生产 率 和 
减少 产品 开发 时 间 

@ 缺陷 预防 (Defect Prevention,DP): 识别 出 错 原因 ,防止 错误 
再 现 (通过 改变 定义 的 软件 过 程 ) 

@ 技术 变更 管理 (Technology Change Management, TCM): 识 
别 有 益 的 新 技术 (工具 、 方 法 和 过 程 ), 并 按 有 序 的 方式 将 其 
转移 至 机 构 之 中 


主要 涉及 软件 组 织 
和 项 目 中 如 何 实现 
持续 不 断 的 过 程 改 进 
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值得 一 提 的 是 ,任何 一 个 成 熟 度 级 别 的 关键 过 程 域 集 都 是 本 级 描述 的 关键 过 程 域 集 
和 所 有 下 级 的 关键 过 程 域 集 的 并 集 。 例 如 第 3 级 的 关键 过 程 域 就 应 有 13 个 不 同 的 域 , 其 
中 7 个 是 第 3 级 自己 包含 的 ,6 个 属于 第 2 级 ,而 第 4 级 应 有 15 个 域 。 


5. 关键 实践 和 共同 特征 

为 了 达到 某 个 成 熟 度 级 别 的 关键 过 程 域 的 目标 ,必须 实施 若干 关键 实践 。 所 谓 关键 
实践 (Key Practice) ,是 指 对 关键 过 程 域 起 重要 作用 的 方针 规程 措施、 活动 ,以 及 相关 基 
础 设施 的 建立 。 关 键 实践 涉及 5 个 方面 ,分 别 为 执行 约定 、 执 行 能 力 、 执 行 的 活动 .测量 和 
分 析 、 验 证 实施 ,被 称 作 5 个 共同 特征 (Common Features) 。 每 个 关键 过 程 域 所 包含 的 关 
键 实践 均 按 这 5 个 共同 特征 进行 组 织 。 

共同 特征 是 表明 一 个 关键 过 程 域 的 实施 和 规范 化 是 否 有 效 、 可 重复 且 持久 的 一 些 属 
性 。 这 5 个 共同 特征 的 含义 如 下 。 

(1) 执行 约定 (Commitment to Perform) 

描述 一 个 机 构 在 保证 将 过 程 建立 起 来 并 持续 起 作用 方面 所 必须 采取 的 行动 。 执 行 约 
定 一 般 包括 制定 机 构 的 方针 和 规定 高 级 管理 人 员 的 支持 。 

(2) 执行 能 力 (Ability to Perform) 

描述 为 了 实施 软件 过 程 ,项 目 或 机 构 中 必须 存在 的 先决 条 件 。 一 般 包 括 资源 、 组 织 机 
构 和 培训 。 

(3) 执行 的 活动 (Activities Performed) 

描述 为 了 实现 一 个 关键 过 程 域 所 需要 的 角色 和 规程 。 执 行 的 活动 一 般 包括 制订 计划 
与 规程 .执行 计划 跟踪 执行 情况 ,必要 时 采取 纠正 措施 。 

(4) 测量 和 分 析 (Measurement and Analysis) 

描述 对 过 程 进行 测量 和 对 测量 结果 进行 分 
析 的 需要 。 测 量 和 分 析 一 般 包括 为 了 确定 所 执 
行 活动 的 状态 及 有 效 性 所 能 采用 的 测量 和 


分 析 组 织 
(5) 验证 实施 (Verifying Implementation) 目标 a Se 
描述 遵照 已 建立 的 过 程 进行 活动 的 措施 。 验 ee 
证 一 般 包括 管理 人 员 和 软件 质量 保证 部 门 所 做 的 有 关 职责 | 关键 实践 ) 
评审 和 审核 。 描述 
6. CMM 的 逻辑 结构 基础 设施 或 活动 
概括 的 CMM 逻辑 结构 如 图 10-5 所 示 。 图 10-5 CMM 的 远 辑 结 构 


10.3.2 软件 能 力 成 熟 度 模 型 的 建立 和 评估 


1. CMM 的 实施 步骤 

企业 实施 CMM, 可 从 如 下 步骤 进行 : 

Qa 提高 思想 认识 ,了 解 其 必要 性 和 迫切 性 。 
@ 确定 合理 的 目标 。 


二 
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@ 进行 CMM 培训 和 咨询 工作 。 
@ 成 立 工 作 组 。 

@ 制定 和 完善 软件 过 程 。 

@ 内 部 评审 。 

@ 初期 评估 。 

@ 正式 评估 。 

@ 根据 评估 的 结果 改进 软件 过 程 。 


2. CMM 的 评估 方法 

CMM 的 评估 方法 为 CBA-IPI (CMM-Based Appraisal for Internal Process 
Improvement, 基 于 CMM 的 内 部 过 程 改进 评估 )。CMM 评估 包括 5 个 等 级 ,共计 18 个 
关键 过 程 域 ,52 个 目标 ,300 多 个 关键 实践 。 每 一 个 CMM 等 级 评估 周期 约 需 12 一 30 个 
月 。 每 一 级 别 的 评估 由 CMU/SEI 授权 的 主任 评估 师 领导 一 个 评审 小 组 进行 。 评 估 过 程 
包括 员工 培训 问卷 填写 和 统计 ,文档 审查 ,数据 分 析 , 与 企业 的 高 层 领导 讨论 和 撰写 评估 
报告 等 。 

3. 实施 CMM 应 把 握 的 原则 

应 该 注意 的 是 ,任何 软件 开发 单位 在 提升 自己 的 CMM 等 级 时 ,只 能 由 所 处 的 层次 向 
紧邻 的 上 一 层次 进化 ,不 可 越级 。 而 且 在 由 某 一 成 熟 层次 向 上 一 更 成 熟 层次 进化 时 ,在 原 
有 层次 中 的 那些 已 经 具备 的 能 力 还 必须 得 到 保持 与 发 扬 。 

此 外 ,通过 CMM 某 个 等 级 的 评估 并 不 是 软件 企业 最 终 的 目的 ,而 最 终 目的 应 是 通过 
CMM 评估 来 改进 企业 的 软件 过 程 ,提升 软件 开发 的 能 力 。 
10.3.3 个 体 软件 过 程 PSP 和 群 组 软件 过 程 TSP 

由 于 CMM 并 未 提供 有 关 实 现 CMM 关键 过 程 域 所 需 的 具体 知识 和 技能 ,因此 
CMU/SEI 于 1989 年 开始 研究 ,并 于 1994 年 提出 个 体 软件 过 程 (Personal Software 
Process,PSP) 。1994 年 开始 研究 并 于 1998 年 由 CMU/SEI 召开 的 过 程 工 程 年 会 上 第 一 
次 介绍 了 和 群 组 软件 过 程 (Team Software Process,TSP) 草 案 , 于 1999 年 出 版 了 有 关 TSP 
的 一 本 书 , 使 软件 过 程 框架 形成 一 个 包含 CMM,PSP 和 TSP 三 者 的 严密 的 整体 ,形成 
CMM/PSP/TSP 体系 。 

个 体 软件 过 程 PSP 是 一 种 可 用 于 控制 ,管理 和 改进 个 人 工作 方式 的 自我 改善 过 程 ， 
是 一 个 包括 软件 开发 表格 .指南 和 规程 的 结构 化 框架 。PSP 为 基于 个 体 和 小 型 群 组 软件 
过 程 的 优化 提供 了 具体 而 有 效 的 途径 ,例如 如 何 制订 计划 ,如 何 控制 质量 ,如 何 与 其 他 人 
相互 协作 ,如 何 建 立 度量 个 体 软件 过 程 改 善 的 基准 等 。 

在 软件 设计 阶段 , PSP 的 着 眼 点 在 于 软件 缺陷 的 预防 ,具体 办 法 是 强化 设计 结束 准 
则 ,而 不 是 设计 方法 的 选择 。PSP 保障 软件 产品 质量 的 一 个 重要 途径 是 提高 设计 质量 。 

经 过 PSP 学 习 和 实践 的 正规 训练 ,软件 工程 师 们 能 够 在 他 们 参与 的 项 目 工作 中 充分 
运用 PSP, 从 而 有 助 于 CMM 目标 的 实现 。 

群 组 软件 过 程 (Team Software Process,TSP) 结合 了 CMM 的 管理 方法 和 PSP 的 工 
程 技能 ,指导 项 目 组 中 的 成 员 如 何 有 效 地 规划 和 管理 所 面临 的 项 目 开发 任务 ,并且 告诉 管 
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理 人 员 如 何 指导 软件 开发 队伍 ,始终 以 最 佳 状态 来 完成 工作 。TSP 实施 集体 管理 与 自己 
管理 相 结合 的 原则 ,最 终 目的 在 于 指导 开发 人 员 如 何在 最 少 的 时 间 内 ,以 预定 的 费用 生产 
出 高 质量 的 软件 产品 ,所 采用 的 方法 是 对 群 组 开发 过 程 的 定义 .度量 和 改进 。 

目前 认为 TSP 比较 适合 规模 为 3 一 20 人 的 开发 小 组 。 

CMM ,PSP 和 TSP 为 软件 产业 提供 了 一 个 集成 化 的 、 三 维 的 软件 过 程 改 革 框 架 。 在 
软件 项 目 开发 过 程 中 ,应 将 实施 CMM 与 实施 PSP,TSP 有 机 地 结合 起 来 ,才能 达到 软件 
过 程 持 续 改善 的 效果 。 


10.3.4 能 力 成 熟 度 模型 集成 CMMI 


1. CMMI 概述 

自从 1991 年 SEI 正式 发 布 软件 SW-CMM 以 来 ,相继 又 开发 出 了 系统 工程 .软件 采 
购 、 人 力 资源 管理 及 集成 产品 开发 方面 的 多 个 能 力 成 熟 度 模 型 。 虽 然 这 些 模 型 在 许多 组 
织 都 得 到 了 良好 的 应 用 ,但 对 于 一 些 大 型 软件 企业 来 说 ,可 能 会 出 现 需 要 同时 采用 多 种 模 
型 来 改进 自己 多 方面 过 程 能 力 的 情况 。 这 时 他 们 就 会 发 现存 在 一 些 问 题 ,其 中 主要 问题 
体现 在 下 面 几 方面 : 

。 不 能 集中 其 不 同 过 程 改进 的 能 力 以 取得 更 大 成 绩 。 

。 要 进行 一 些 重复 的 培训 .评估 和 改进 活动 ,因而 增加 了 成 本 。 

。 遇 到 不 同 模型 中 有 一 些 对 相同 事物 说 法 不 一 致 ,或 活动 不 协调 ,甚至 相抵 触 。 

所 以 , 当 CMUVSEI 开始 开发 新 一 代 成 熟 度 模型 的 时 候 ,试图 整合 不 同 模型 中 的 最 佳 
实践 ,建立 统一 模型 ,覆盖 不 同 领域 , 供 企业 进行 整个 组 织 的 全 面 过 程 改进 。CMU/SEI 
于 2001 年 12 月 正式 发 布 了 能 力 成 熟 度 集成 模型 (Capability Maturity Model 
Integration,CMMD1.1 版 ,这 标志 着 CMMI 的 正式 使 用 。CMU/SEI 也 正式 宣布 ,将 不 
再 维护 SW-CMM 的 CBA-IPI 评估 方法 : 在 CMMI 1. 1 发布 后 的 两 年 内 ,还 提供 有 关 
SW-CMM 和 CBA-IPI 主任 评估 员 的 培训 ,并 接收 评估 数据 ,但 这 一 切 已 于 2003 年 12 月 
底 正 式 停止 。 

值得 注意 的 是 ,SEI 并 没有 废除 CMM 模型 ,而 是 以 CMMI 的 SCAMPI(Standard 
CMMI Appraisal Method for Process Improvement) 评 估 方 法 取代 CMM 的 CBA-IPI 评 
佑 方法。 当然 , 随 着 软件 行业 的 发 展 ,CMMI 模型 将 最 终 取代 CMM 模型 。 这 是 因为 , 相 
比 于 CMM,CMMI 以 更 加 系统 和 一 致 的 框架 来 指导 组 织 改进 软件 过 程 ,提高 产品 和 服务 
的 开发 .获取 和 维护 能 力 。 

CMMI 起 源 于 软件 能 力 成 熟 度 模型 (SW-CMM) v2.0 draft C、 电 子 行业 协会 临时 标 
准 (EIA/IS-731) 和 集成 产品 开发 能 力 成 熟 度 模型 (IPD-CMM) v0. 98 三 个 模型 ( 源 模型 )。 
模型 中 同时 集成 了 供应 管理 的 内 容 。 另 外 ,在 CMMI 中 除了 沿用 CMM 的 分 阶段 表示 形 
式 外 ,还 增加 了 与 ISO/IEC 15504 TR (技术 报告 ) 类 似 的 连续 表示 形式 。 连 续 式 表示 形 
式 ( 即 CMMI 连续 式 模型 ) 将 CMMI 中 的 过 程 区 域 分 为 四 大 类 : 项 目 管理 \ 工 程 活动 、 支 
持 活动 或 者 过 程 管理 ,对 于 每 个 大 类 中 的 过 程 区 域 ,又 进一步 分 为 基本 的 和 高 级 的 。 这 
样 ,按照 连续 式 模型 实施 CMMI 的 时 候 ,一 个 组 织 可 以 把 某 个 大 类 (如 项 目 管理 ) 的 实践 
一 直 做 到 最 好 ,而 其 他 大 类 的 实践 则 完全 不 考虑 。 也 就 是 说 ,如 果 企 业 只 希望 提高 自己 在 


区 
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项 目 管理 .工程 活动 ,支持 活动 或 者 过 程 管理 四 个 大 类 中 的 某 一 类 或 几 类 的 能 力 , 则 应 使 
用 CMMI 的 连续 表示 形式 。 若 企业 仍 愿 沿用 CMM 中 成 熟 度 级 别 的 思路 ,持续 地 改进 过 
程 , 则 可 使 用 CMMI 的 分 阶段 表示 形式 ( 即 CMMI 分 级 式 模型 )。 

CMMI 模型 的 组 成 和 适用 范围 如 表 10-6 所 示 。 


表 10-6 ”CMMI 模型 的 组 成 和 适用 范围 


CMMI 模型 组 件 适用 范围 
SE/SW 系统 工程 ,软件 工程 
SE/SW /IPPD 系统 工程 ,软件 工程 ,集成 产品 和 过 程 开发 
SE/SW /IPPD/SS 系统 工程 ,软件 工程 ,集成 产品 和 过 程 开 发 .供应 采购 
培训 课程 评估 师 、 过 程 改进 人员 等 培训 
SCMPI 评估 方法 


在 CMMI 模 型 组 件 中 ,SE/SW 是 核心 ,SE/SW/IPPD,SE/SW/IPPD/SS 是 在 此 基 
础 上 扩展 而 来 的 。 


2. CMMI 的 主要 内 容 

CMMI 分 级 式 模型 中 的 等 级 设置 与 SW-CMM 模型 基本 相同 ,只 是 某 些 等 级 的 名 称 
有 变化 。 

CMMI 连续 式 模型 中 的 等 级 设置 则 与 ISO/IEC 15504 TR 基本 一 致 ,CMMI 连续 式 
模型 的 第 3 级 ,第 4 级 名 称 虽然 与 ISO/IEC 15504 TR 有 区 别 , 但 其 含义 是 基本 一 样 的 。 

表 10-7 列 出 了 CMMI,CMM,ISOVIEC 15504 TR 模型 中 等 级 的 对 应 关系 。 


表 10-7 各 模型 的 等 级 对 应 关系 


等 级 CMM CMMI( 分 级 式 ) CMMI( 连 续 式 ) ISO/IEC 15504 TR 
5 优化 极 优化 级 优化 级 优化 级 
4 已 管理 级 定量 管理 级 定量 管理 级 可 预测 级 
3 已 定义 级 已 定义 级 已 定义 级 已 建立 级 
2 可 重复 级 已 管理 级 已 管理 级 已 管理 级 
1 初始 级 初始 级 已 执行 级 已 执行 级 
0 未 完成 级 未 完成 级 


下 面 对 CMMI 分 级 式 模型 和 CMM 各 等 级 中 的 关键 过 程 域 进行 比较 。 

CMMI 共有 分 别 属于 4 个 等 级 的 25 个 关键 过 程 域 。 CMMI 对 CMM 的 关键 过 程 域 
主要 进行 了 如 下 变更 。 

CMM 第 2 级 共有 6 个 关键 过 程 域 .CMMI 则 增加 了 1 个 : 度量 和 分 析 。 原 先 6 个 
关键 过 程 域 的 名 称 和 内 容 在 CMMI 中 做 了 部 分 改进 ,但 是 主体 内 容 没有 大 幅 调 整 。 

CMM 第 4 级 共有 2 个 关键 过 程 域 ,在 CMMI 中 仍 是 2 个 ,只 是 名 称 和 内 容 有 所 改进 。 
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CMM 第 5 级 共有 3 个 关键 过 程 域 ,在 CMMI 中 进行 了 合并 , 改 为 2 个 ,但 主要 内 容 

变化 最 显著 的 是 在 第 3 级 上 ,CMM 中 7 个 关键 过 程 域 变 成 了 CMMI 中 的 14 个 ,其 
中 原来 对 工程 活动 进行 要 求 的 关键 过 程 域 一 一 软件 产品 工程 进行 了 详细 的 拆 分 ,并 结合 
常见 的 软件 生命 周期 模型 进行 了 映射 。CMMI 中 新 增 的 关键 过 程 域 中 还 涉及 过 去 未 曾 
提 到 的 内 容 , 比 如 决策 分 析 和 决定 、 集 成 组 队 等 。 

两 个 模型 的 关键 过 程 域 比 较 见 表 10-8。 


表 10-8 CMMI 和 CMM 的 关键 过 程 域 比较 


CMM CMMI 
等 级 类 别 
关键 过 程 域 缩写 关键 过 程 域 缩写 
技术 变更 管理 TCM 
组 织 革新 与 部 署 OID 过 程 管理 
5 过 程 变 更 管理 PCM 
缺陷 预防 DP 原因 分 析 与 决策 CAR 支持 
， 软件 质量 管理 SQM 组 织 过 程 性 能 OPP 过 程 管理 
定量 过 程 管理 QPM 定量 项 目 管理 QPM 项 目 管理 
需求 制定 RD 工程 
技术 方案 TS 工程 
软件 产品 工程 SPE 
产品 集成 PI 工程 
验证 VER 工程 
同行 评审 PR 确认 VAL 工程 
组 织 过 程 聚焦 OPF 组 织 过 程 聚 焦 OPF 过 程 管 理 
组 织 过 程 定义 OPD 组 织 过 程 定义 OPD 过 程 管理 
3 培训 大 纲 TP 组 织 培训 oT 过 程 管理 
集成 软件 管理 ISM 
集成 项 目 管理 IPM 项 目 管理 
组 间 协 调 IC 
风险 管理 RSKM 项 目 管理 
决策 分 析 与 决定 DAR 支持 
集成 供应 商 管理 ISM 项 目 管理 
组 织 集成 环境 OEI 支持 
集成 组 队 IT 项 目 管理 
需求 管理 RM 需求 管理 RM 工程 
2 软件 项 目 策划 SPP 项 目 策划 PP 项 目 管理 
软件 项 目 跟踪 与 监控 SPTO 项 目 监督 与 控制 PMC 项 目 管理 
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续 表 
CMM CMMI 
等 级 类 别 
关键 过 程 域 缩写 关键 过 程 域 缩写 
软件 子 合同 管理 SSM 供应 协议 管理 SAM 项 目 管理 
软件 质量 保证 SQA 过 程 与 产品 质量 保证 PPQA 支持 
软件 配置 管理 SCM 配置 管理 CM 支持 
度量 与 分 析 MA 支持 
1 


3 CMMI 的 评估 方法 

随 着 CMM 过 渡 到 CMMI, 其 CAF (CMM Assessment Framework) 评 估 框 架 变 成 评 
人 需求 (Appraisal Requirements for CMMI, ARC),CMM 的 IPI-CBA 评估 方法 则 被 
CMMI 的 SCAMPI 评估 方法 所 取代 。 

开展 CMMI 评估 必须 是 SEI 授权 的 合作 机 构 ,评估 活动 由 SEI 授权 的 主任 评估 师 进 
行 。CMMI 的 评估 流程 与 CMM 基本 相同 。 

另外 ,与 CMM 中 的 等 级 评估 相同 的 是 ,CMMI( 分 级 式 模型 ) 中 的 等 级 评估 会 根据 被 
评估 的 成 熟 度 级 别 , 检 查 所 有 不 高 于 该 级 别 的 关键 过 程 域 。 


4. 如 何在 CMM 和 CMMI 之 间 进 行 选择 

究竟 是 选择 CMM 还 是 CMMI, 主要 应 基于 以 下 方面 进行 考虑 。 

(1) 实施 企业 的 业务 特点 

如 果 企 业 的 规模 不 是 很 大 ,经 费 有 限 ,业务 又 以 软件 开发 为 主 ,那么 还 是 CMM 比较 
适用 。 如 果 企 业 的 规模 比较 大 (开发 人 员 100 人 以 上 ) ,并 且 业 务 不 仅仅 集中 在 软件 开发 ， 
还 包括 硬件 开发 哪怕 是 硬件 代理 (采购 ) 都 可 以 考虑 实施 CMMI。 

(2) 实施 企业 对 过 程 改进 的 熟悉 程度 

如 果 企 业已 经 实施 过 ISO 9000 ,并 且 取 得 了 较 好 的 效果 ,那么 可 以 考虑 实施 CMMI。 
如 果 企 业 虽然 没有 实施 过 CMM., 但 是 对 于 过 程 改进 一 直 比较 关注 ,接受 过 一 些 相 关 培 
训 , 甚 至 能 够 自发 地 进行 一 些 过 程 改进 ,那么 也 可 以 考虑 实施 CMMI。 如 果 过 去 没有 接 
触 过 类 似 的 工作 ,那么 最 好 先 从 软件 CMM 2 级 开始 ,建立 持续 过 程 改进 的 思路 ,以 后 再 
向 CMMI 平 滑 地 转换 。 

(3) 软件 过 程 改 进 的 目标 

如 果 企 业 只 希望 单方 面 地 提高 自己 在 项 目 管理 ,工程 活动 ,支持 活动 或 者 过 程 管理 
4 个 方面 中 的 某 个 或 某 几 个 方面 的 能 力 ,就 应 使 用 CMMI (CMMI 连续 式 模型 ); 如果 企 
业 过 程 改进 仍 沿用 CMM 中 成 熟 度 级 别 的 思路 ,希望 全 面 地 提升 过 程 能 力 , 则 不 一 定 非 要 
使 用 CMMI。 
10.3.5 SPCA 评估 体系 


为 了 提高 国内 软件 企业 的 竞争 力 ,我 国信 息 产业 部 会 同 国家 认证 认可 监督 委员 会 ,在 
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研究 国际 软件 评估 体制 尤其 是 CMMI 的 基础 上 ,考虑 国内 软件 产业 实际 情况 ,于 2001 年 
建立 了 SPCA( 软 件 过 程 及 能 力 成 熟 度 评估 ,又 称 “ 双 模 认证 ”) 评 估 体 系 。 

SPCA 是 软件 过 程 能 力 评估 和 软件 能 力 成 熟 度 评估 的 统称 。SPCA 所 依据 的 评估 标 
准 是 我 国 制定 的 SJ/T 11234《 软 件 过 程 能 力 评估 模型 ) 和 SJ/T 11235《 软 件 能 力 成 熟 度 
模型 》。 


10.4 其 他 软件 管理 体系 


除了 CMM/CMMI 外 ,应 用 较 广 泛 的 软件 管理 体系 还 有 ISO 9000 质量 标准 体系 和 
ISO/IEC 15504 标准 。 

ISO 9000 是 国际 标准 化 组 织 (International Organization for Standardization ,ISO) 
颁布 的 全 世界 范围 内 通用 的 质量 管理 和 质量 保证 方面 的 一 系列 标准 。 

ISO/VIEC 15504( 信 息 技术 -过 程 评 估 ) 标 准则 是 国际 标准 化 组 织 和 国际 电工 委员 会 
(IEC) 在 ISO/IEC 15504 TR (SPICE) 的 基础 上 制定 的 正式 国际 标准 ,用 于 软件 过 程 的 
评估 。 

关于 ISO 9000 质量 标准 体系 和 ISO/VIEC 15504 标准 ,目前 的 介绍 很 多 ,读者 可 参看 
相关 资料 尤其 是 网 站 资料 ,以 比较 与 CMM/CMMI 的 异同 。 


10.5 软件 质量 保证 


10. 5.1 软件 质量 保证 概述 

软件 质量 保证 SQA(Software Quality Assurance) 是 CMM 第 2 级 中 的 一 个 关键 过 
程 域 , 它 是 贯穿 整个 软件 过 程 的 第 三 方 独立 审查 活动 ,出 现在 大 多 数 关 键 过 程 域 的 检查 与 
验证 的 公共 特性 中 ,在 整个 软件 开发 过 程 中 充当 重要 角色 。 

实践 证 明 , 软 件 质量 保证 活动 在 提高 软件 质量 方面 卓有成效 。IBM 360/370 系统 软 
件 的 开发 经 验证 明了 这 一 点 。IBM 的 有 关 报 告 指出 ,在 8 年 的 时 间 里 ,软件 质量 提高 了 
3 一 5 倍 ,而 SQA 是 其 质量 体系 中 的 一 个 重要 组 成 部 分 。 


1. 软件 质量 保证 的 目的 

SQA 的 目的 是 向 管理 者 提供 对 软件 过 程 进行 全 面 监控 的 手段 ,包括 评审 和 审计 软件 
产品 和 活动 ,验证 它们 是 否 符 合 相应 的 规程 和 标准 ,同时 给 项 目 管理 者 提供 这 些 评审 和 审 
计 结果 ,以 反映 产品 和 过 程 质量 ,提高 项 目 透明 度 。 

值得 注意 的 是 ,SQA 组 织 并 不 负责 生产 高 质量 的 软件 产品 和 制订 质量 计划 ,这 些 都 
属于 软件 开发 人 员 的 工作 。 


2. SQA 组 织 的 主要 工作 

SQA 组 织 的 主要 工作 包括 两 方面 : 监控 软件 的 开发 过 程 ,保证 软件 开发 过 程 符合 相 
应 的 标准 与 规程 ;保证 软件 产品 、 软 件 过 程 中 存在 的 不 符合 问题 得 到 处 理 ,必要 时 将 问题 
反映 给 高 级 管理 者 。 
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除 此 以 外 ,SQA 组 织 还 可 作为 软件 工程 过 程 小 组 (Software Engineering Process 
Group,SEPG) 在 项 目 组 中 的 延伸 ,能 够 收集 项 目 中 好 的 实施 方法 和 发 现实 施 不 利 的 原 
因 ,为 修改 企业 内 部 软件 开发 整体 规范 提供 依据 ,为 其 他 项 目 组 的 开发 过 程 实施 提供 先进 
方法 和 样 例 。 

注意 ,软件 工程 过 程 小 组 SEPG 的 职责 是 提供 软件 过 程 的 指导 ,帮助 项 目 组 制定 项 目 
过 程 ,实施 过 程 改进 。 如 果 项 目 组 和 SQA 对 过 程 的 理解 不 一 致 ,SEPG 将 作为 最 终 仲 裁 
者 。 可 用 立法 者 和 执法 者 来 形容 SEPG 与 SQA 之 间 的 关系 。 

SQA 的 主要 作用 是 给 管理 者 提供 实现 软件 过 程 的 保证 ,因此 SQA 组 织 需 要 保证 : 
选 定 的 开发 方法 被 采用 ; 

选 定 的 标准 和 规程 得 到 采用 和 遵循 ; 

进行 独立 的 审查 

偏离 标准 和 规程 的 问题 得 到 及 时 地 反映 和 处 理 ; 
项 目 定义 的 每 个 软件 任务 得 到 实际 执行 。 
10.5.2 软件 质量 保证 的 工作 内 容 


1. 计划 

应 该 针对 项 目 制定 SQA 计划 ,注意 不 是 项 目 计划 。 制 定 SQA 计划 应 当 注意 如 下 
内 容 : 
(1) 确定 软件 质量 保证 活动 的 目标 和 审计 内 容 。 

(2) 明确 审计 方式 。 

(3) 确定 审计 结果 报告 的 规范 。 

对 于 一 般 性 项 目 ,可 采用 通用 的 软件 质量 保证 计划 ,而 对 于 那些 有 着 特殊 质量 要 求 的 
项 目 , 则 必须 根据 项 目 自身 的 特点 制定 专门 的 计划 。 

2. 审计 /证 实 

依据 SQA 计划 进行 SQA 审计 工作 ,按照 规范 发 布 审计 结果 报告 。 

需要 注意 的 是 ,审计 一 定 要 有 项 目 组 人 员 陪同 , 不 能 搞 突然 袭击 。 

审计 的 内 容 主要 为 项 目 组 是 否 按照 过 程 要 求 执行 了 相应 活动 ,是 否 按照 过 程 要 求 产 
生 了 相应 产品 。 

3. 处 理 不 符合 问题 

对 审计 过 程 中 发 现 的 不 符合 问题 ,SQA 人 员 应 报告 其 不 符合 的 地 方 ,以 及 它 对 产品 
的 影响 ,同时 向 项 目 组 提出 改进 建议 ,并 持续 跟踪 直到 问题 解决 。 若 有 项 目 组 暂时 无 法 解 
决 的 不 符合 问题 ,SQA 应 向 高 级 管理 者 直接 反映 。 
10. 5.3 软件 质量 保证 的 实施 

软件 质量 保证 的 实施 过 程 中 需要 注意 如 下 方面 的 问题 ; 

(1) 企业 的 高 级 管理 者 必须 重视 软件 质量 保证 活动 。 在 一 些 组 织 的 软件 生产 过 程 
中 ,高 级 管理 者 不 重视 软件 质量 保证 活动 ,对 SQA 人 员 发 现 的 问题 不 及 时 处 理 。 如 此 一 
来 ,软件 质量 保证 就 流 于 形式 ,很 难 发 挥 它 应 有 的 作用 。 
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(2) 要 考虑 SQA 人 员 的 素质 。SQA 人 员 的 素质 主要 体现 在 熟悉 软件 开发 过 程 及 企 
业内 部 已 有 的 开发 过 程 规范 ;掌握 专业 的 技术 ,例如 质量 控制 知识 .统计 学 知识 等 ;有 很 强 
的 沟通 能 力 。 为 提高 SQA 人 员 的 素质 ,可 对 其 进行 专门 培训 。 

(3) 某 项 目的 SQA 人 员 不 能 是 该 项 目 组 的 开发 人 员 ,配置 管理 人 员 或 测试 人 员 ,一 
个 项 目的 SQA 除了 监控 项 目 过 程 、 完 成 SQA 相关 工作 以 外 ,不 应 该 参与 项 目 组 的 其 他 
实质 性 工作 ,和 否则 他 会 与 项 目 组 捆绑 在 一 起 ,很 难保 持 客 观 性 。 

(4) SQA 人 员 在 工作 过 程 中 一 定 要 抓 住 问题 的 重点 与 本 质 , 不 要 陷 人 对 细节 的 争论 
之 中 。SQA 人 员 应 集中 审查 定义 的 软件 过 程 是 否 得 到 了 实现 ,及 时 纠正 那些 疏漏 或 执行 
得 不 完全 的 步骤 ,以 此 来 保证 软件 产品 的 质量 。 

(5) SQA 人 员 应 客观 有 责任 心 。 作 为 第 三 方 对 项 目 过 程 进行 监督 ,应 能 保持 自己 
的 客观 性 ;对 于 项 目 组 中 多 次 协调 解决 不 了 的 问题 ,应 向 项 目的 高 层 管理 者 反映 。 

(6) SQA 人 员 要 能 应 对 繁杂 的 工作 。 作 为 SQA 人 员 , 在 跟踪 项 目 进 行 过 程 的 时 候 
需要 对 项 目 组 的 很 多 产品 进行 审计 ,而 且 还 会 参与 项 目 组 中 的 多 种 活动 。 同 时 ,一 个 
SQA 人 员 还 有 可 能 参与 多 个 项 目 组 的 审计 任务 。 这 就 要 求 SQA 人 员 在 处 理 这 些 事物 时 
要 耐心 细致 。 

10.5.4 软件 质量 保证 与 测试 的 区 别 

目前 ,很 多 人 对 于 SQA 与 软件 测试 的 区 别 不 很 清楚 。 在 阐述 两 者 区 别 之 前 , 先 介绍 
QA 和 QC 的 概念 。 

QA(Quality Assurance, 质 量 保 证 ) 是 要 监控 公司 质量 保证 体系 的 运行 状况 ,审计 项 
目的 实际 执行 情况 和 公司 规范 之 间 的 差异 ,并 出 具 改 进 建议 和 统计 分 析 报 告 , 对 公司 的 质 
量 保证 体系 的 质量 负责 。 

QCCQuality Control, 质 量 控制 ) 是 对 每 一 个 阶段 或 者 关键 点 的 产 出 物 ( 工 件 ) 进 行 检 
测 ,评估 产 出 物 是 否 符合 预计 的 质量 要 求 , 对 产 出 物 的 质量 负责 。QC 有 时 也 被 称 为 质量 
检验 或 质量 检查 。 

QA 在 软件 企业 中 实际 上 就 是 SQA, 即 软件 质量 保证 ;而 QC 在 软件 企业 中 实际 上 就 
是 SQC, 即 软件 质量 控制 。 

如 果 将 软件 的 生产 比喻 成 一 条 产品 加 工 生产 线 , 那 么 SQA 只 负责 生产 线 本 身 的 质 
量 ,而 不 管 生产 线 中 单个 产品 的 实际 质量 情况 。 也 就 是 说 ,SQA 只 负责 软件 开发 过 程 的 
质量 ,通过 保证 过 程 的 质量 来 间接 保证 软件 产品 的 质量 。SQA 在 软件 企业 内 对 应 的 角色 
为 软件 质量 保证 人 员 。 

SQC 则 不 管 生产 线 本 身 的 质量 ,而 只 关注 按 现 有 生产 线 生产 的 阶段 性 产品 的 质量 是 
否 符合 预期 的 要 求 。 即 SQC 只 负责 检查 软件 开发 过 程 中 各 个 阶段 产 出 的 工件 的 质量 ,如 
需求 规格 说 明 书 ,设计 规格 说 明 书 、 源 代码 测试 文档 等 工件 的 质量 。SQC 在 软件 企业 内 
对 应 的 角色 为 软件 测试 人 员 。 

显然 ,SQA 和 SQC 的 最 终 目 标 是 一 致 的 ,都 是 为 了 保证 软件 的 质量 。 但 其 工作 内 容 
是 有 很 大 差别 的 ,SQA 通过 控制 过 程 的 质量 来 保证 软件 产品 的 质量 ,而 SQC 则 是 通过 控 
制 整个 过 程 中 的 阶段 性 成 果 的 质量 来 保证 软件 产品 的 质量 。 

SQA 和 SQC 对 于 企业 软件 质量 的 保证 是 缺 一 不 可 的 ,这 两 类 人 员 常 需要 相互 配合 。 
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例如 ,SQC 人 员 ( 可 简称 为 SQC 或 QC) 在 工作 过 程 中 会 产生 出 大 量 的 过 程 数据 ,SQA 人 
员 ( 可 简称 为 SQA 或 QA) 通 过 对 这 些 数 据 进行 统计 分 析 , 发现 软件 过 程 中 存在 的 问题 ， 
进而 反馈 到 过 程 的 改进 活动 中 ,再 通过 SQC 人 员 搜 集 的 大 量 数据 来 验证 软件 过 程 改 进 的 
有 效 性 ,最 终 实现 过 程 质量 及 软件 质量 的 持续 改进 。 
综 上 所 述 ,SQA 与 SQC 之 间 的 关系 如 下 。 
(1) SQA 和 SQC 的 共同 点 在 于 它们 的 最 终 目 标 一 致 ,都 是 提高 软件 的 质量 。 
(2) 二 者 的 区 别 在 于 : 
。 任务 不 同 。SQA 是 审计 软件 过 程 的 质量 ,而 SQC 则 是 检验 每 个 阶段 产品 的 质量 。 
。 层次 不 同 。SQA 是 站 在 比 SQC 更 高 的 层次 上 保证 软件 质量 ;SQC 关注 的 内 容 是 
局 部 的 ,而 SQA 关注 的 则 是 整个 软件 过 程 。 因 此 ,SQC 人 员 ( 软 件 测试 人 员 ) 的 
工作 是 受 SQA 人 员 的 监督 的 , 即 SQA 可 保证 测试 工作 是 按照 定义 好 的 流程 执 
行 的 。 


10.6 小 结 


本 章 介绍 了 与 软件 质量 及 软件 测试 密切 相关 的 若干 概念 或 活动 ,如 软件 质量 .软件 质 
量 模型 软件 度量 .软件 能 力 成 熟 度 模型 及 能 力 成 熟 度 模型 集成 .ISO 9000 标准 .软件 质 
量 保证 (SQA) 等 。 本 章 的 主要 目的 是 通过 对 以 上 内 容 的 介绍 ,使 大 家 能 站 在 更 高 的 角度 
看 待 和 把 握 软 件 测试 提高 软件 质量 。 


习 题 


. 软件 质量 的 含义 是 什么 ? 

. 软件 质量 模型 有 何 作 用 ? 试 列 举 著 名 的 软件 质量 模型 。 

. 软件 度量 的 含义 和 作用 分 别 是 什么 ? 软件 度量 的 3 个 主要 方面 是 什么 ? 
什么 是 CMM? 简 述 其 作用 。 

. 试 简要 地 解释 CMM 中 5 个 等 级 的 各 自 含义 。 

. 结合 图 10-5 ,说 明 CMM 逻辑 结构 的 含义 。 

. CMMI 与 CMM 的 主要 不 同 之 处 在 哪些 方面 ? 

. 软件 质量 保证 的 目的 是 什么 ? 其 工作 内 容 包 括 哪 些 ? 

. 软件 质量 保证 与 测试 的 不 同 之 处 在 哪里 ? 
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软件 测试 案例 


本 章 要 点 : 

。 自动 化 测试 方案 选 型 。 

。 数据 库 系 统 的 压力 测试 。 

。 分 布 式 金融 业务 系统 的 性 能 测试 。 


本 章 介 绍 了 三 个 具体 的 测试 案例 ,包括 一 个 企业 自动 化 测试 方案 选 型 案例 和 两 个 性 
能 测试 案例 。 通 过 对 本 章 的 学 习 , 可 以 强化 对 软件 测试 尤其 是 性 能 测试 的 综合 体验 。 


11.1 企业 自动 化 测试 方案 选 型 案例 


11.1.1 公司 背景 介绍 
A 公司 是 一 -家 大 型 保险 公司 ,拥有 近 20 个 城市 的 分 公司 ,并 在 其 中 5 个 城市 建立 了 
IT 支持 中 心 。 这 些 IT 中 心 负责 所 有 内 部 应 用 系统 的 开发 和 运行 维护 ,同时 负责 管理 IT 
集成 商 和 第 三 方 应 用 供应 商 。 平 均 每 年 的 上 线 应 用 数量 为 20 个 左右 (新 业务 系统 和 原 有 
业务 系统 的 主要 版 本 发 布 )。 其 开发 团队 主要 分 布 在 2 个 城市 ,有 300 名 左右 ,同时 20% 
左右 的 项 目 通过 项 目 开 发 外 包 . 或 者 直接 从 第 三 方 采购 获得 。 
目前 A 公司 的 专职 测试 团队 人 数 不 足 30 人 ,而 且 测 试 人 员 技 能 参差 不 齐 ,几乎 没有 
成 熟 稳定 的 自动 化 测试 解决 方案 。 测 试 只 是 作为 项 目 上 线 前 的 一 道 工序 ,并 没有 发 挥 应 
有 的 作用 。 但 在 测试 团队 和 研发 部 门 的 沟通 等 方面 ,都 有 明确 的 邮件 往来 规范 和 例会 等 
既定 管理 方式 。 由 于 已 上 线 应 用 系统 的 问题 ,开发 团队 必须 分 出 一 部 分 资源 维护 和 修复 
上 线 应 用 ,而 测试 团队 的 工作 水 平和 效率 却 无 法 与 这 些 应 用 质量 挂钩 ,更 无 从 谈 起 对 软件 
质量 的 控制 。 
因此 ,A 公司 决定 在 软件 测试 方面 进行 投入 ,主要 考虑 如 下 几 个 方面 ， 
。 引 进 软件 测试 流程 管理 的 自动 化 工具 ,使 软件 测试 和 软件 开发 一 样 可 被 评估 、 被 
衡量 。 
。 实现 性 能 测试 自动 化 ,所 有 应 用 上 线 之 前 必须 有 应 用 性 能 风险 评估 报告 和 相关 部 
门 的 确认 。 
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。 逐步 实现 功能 测试 自动 化 ,在 目前 人 员 配 置 的 情况 下 ,把 部 分 手工 测试 变 成 自动 


化 测试 。 
。 通 过 软件 测试 自动 化 ,管理 软件 测试 中 的 案例 、 缺 陷 、 报 告 等 资产 ,进一步 提升 软 
件 测试 效率 并 建立 测试 基础 库 。 


。 未 来 的 2 一 3 年 内 使 所 有 应 用 系统 上 线 都 必须 有 数字 化 测试 数据 作为 依据 。 
11.1.2 公司 应 用 系统 现状 

保险 公司 的 业务 种 类 繁多 ,同时 在 经 过 了 几 十 年 的 经 营 后 ,公司 内 的 应 用 系统 从 早期 
的 终端 方式 到 现代 的 J2EE 和 .NET 等 应 有 尽 有 。IT 部 门 计划 在 未 来 的 3 年 时 间 内 将 所 
有 终端 和 C/S 方式 的 应 用 转换 成 B/S 架构 ,但 当前 仍然 需要 对 这 些 旧 应 用 系统 进行 维 
护 , 以 保证 业务 的 顺利 进行 。 对 于 开发 部 门 来 说 ,目前 新 应 用 开发 基本 上 已 经 以 B/S 架 
构 为 主 , 主 要 是 基于 J2EE 架构 的 Web HTTP 应 用 和 部 分 Window. NET Form 的 应 用 。 
11.1.3 公司 软件 测试 现状 

测试 部 门 目前 仅 负责 系统 测试 和 对 用 户 验 证 测试 进行 管理 ,对 于 单元 测试 和 集成 测 
试 主要 由 开发 人 员 完 成 。 由 于 缺乏 监测 手段 ,测试 部 门 无 法 收集 和 确定 集成 测试 和 单元 
测试 的 完成 情况 。 在 整个 软件 测试 过 程 中 ,业务 需求 是 由 开发 部 门 通过 Rational 
RequisitePro 进行 管理 ,但 测试 需求 尚 没有 提出 要 求 。 测 试 案例 主要 放 在 公司 公用 的 文 
件 服务 器 的 目录 中 进行 管理 ,对 测试 中 缺陷 流程 等 管理 主要 依靠 邮件 的 流转 进行 处 理 。 
目前 ,90% 以 上 的 测试 是 通过 Excel 和 Word 等 测试 案例 文件 来 完成 ,测试 人 员 对 软件 测 
试 自动 化 的 认识 仅 停留 在 “记录 十 回放 ”上 。 
11.1.4 可 供 选择 的 方案 

A 公司 综合 考虑 了 各 种 软件 测试 自动 化 方案 ,最 终 把 注意 力 放 在 以 下 3 种 方案 上 。 

方案 A 采用 以 HP Mercury 公司 产品 为 主 的 软件 测试 自动 化 方案 。 

(1) 依照 原先 的 邮件 流转 过 程 配置 TestDirector 缺陷 管理 流程 ,为 每 个 保险 业务 的 
开发 小 组 和 测试 团队 分 配 相 应 的 用 户 许 可 证 ,取消 原 有 邮件 方式 。 

(2) 部 署 Mercury QuickTest Pro, 完 成 对 应 用 程序 相关 功能 的 测试 。 

(3) 部 署 Mercury LoadRunner, 从 测试 团队 中 分 化 出 专职 的 自动 化 性 能 测试 小 组 ， 
与 业务 部 门 协调 ,建立 A 公司 应 用 系统 上 线性 能 指标 ,通过 LoadRunner 给 出 测试 指标 。 

(4) 公司 成 立 专门 的 质量 控制 部 门 , 对 TestDirector 中 的 数据 定期 进行 分 析 , 建 立 相 
关 质 量 模型 ,以 便于 企业 量化 管理 和 过 程 改进 。 

方案 B 采用 以 IBM Rational 产品 为 主 的 软件 测试 自动 化 方案 。 

(1) 采用 Rational TestManager 管理 整个 测试 流程 ,为 相关 开发 和 测试 小 组 成 员 分 
配 相应 权限 ,改变 以 前 通过 邮件 和 Word,Excel 文件 管理 测试 的 工作 方式 。 

(2) 部 署 Rational Robot, 以 完成 相关 的 功能 测试 .性 能 测试 ,以 及 新 版 本 发 布 时 的 冒 
烟 测试 。 

(3) 部 署 Rational PurifyPlus ,将 测试 工作 前 移 到 开发 阶段 ,使 编程 人 员 在 编码 阶段 
引入 的 错误 能 够 尽早 被 检测 并 修复 ,降低 后 期 测试 的 开销 。 

(4) 公司 成 立 专门 的 质量 控制 部 门 , 对 TestManager 中 的 数据 定期 进行 分 析 ,建立 相 
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关 质 量 模型 ,以 便于 企业 量化 管理 和 过 程 改 进 。 

方案 C 采用 以 开源 软件 为 主 的 软件 测试 自动 化 方案 。 

(1) 采用 Bugzilla 进行 缺陷 跟踪 管理 ,采用 Bugzilla Test Runner 进行 测试 用 例 管 
理 , 采 用 CVS 进行 测试 资源 的 配置 管理 。 

(2) 采用 MaxQ 和 WebInject 对 B/S 结构 的 应 用 系统 进行 功能 测试 。 

(3) 采用 DBMonster,OpenSTA,LoadSim 进行 相关 的 性 能 测试 。 

(4) 可 采用 XUnit 架构 的 开源 工具 对 不 同 语言 的 程序 单元 进行 单元 测试 。 

(5) 公司 成 立 专门 的 开源 软件 维护 小 组 ,以 解决 遇 到 的 工具 维护 工作 。 

(6) 公司 成 立 专门 的 质量 控制 部 门 , 对 Bugzilla, Bugzilla Test Runner,CVS 中 的 数 
据 定期 进行 分 析 , 建 立 相 关 质量 模型 ,以 便于 企业 量化 管理 和 过 程 改 进 。 
11.1.5 最 终 采 用 的 测试 自动 化 方案 

通过 多 轮 评估 和 论证 ,以 及 经 过 各 厂商 的 现场 演示 ,甚至 包括 为 期 1 周 左右 的 实际 试 
用 ,A 公司 最 终 采 用 了 一 个 以 HP Mercury 公司 产品 为 主 的 软件 测试 自动 化 方案 。 在 这 
个 软件 测试 自动 化 方案 中 ,同时 考虑 了 集成 A 公司 现 有 的 资源 和 流程 ,尽量 降低 解决 方 
案 导 入 的 初期 门槛 ,同时 根据 要 求 在 实施 过 程 中 并 非 一 步 到 位 ,而 是 通过 制定 详细 的 实施 
计划 ,分 步骤 展开 实施 。 


1. 初期 实施 阶段 

(1) 部 署 Mercury Quality Center 服务 器 。 依 照 原先 的 邮件 流转 过 程 配置 其 
TestDirector 的 缺陷 管理 流程 ,为 每 个 保险 业务 的 开发 小 组 和 测试 团队 分 配 相应 的 用 户 
许可 证 ,首先 要 求 所 有 正在 测试 和 将 要 进行 测试 的 项 目 都 必须 通过 这 一 缺陷 管理 流程 进 
行 缺 陷 递 交 和 处 理 , 原 有 邮件 方式 取消 ;并 安排 和 培训 一 名 测试 管理 工程 师 负 责 接受 测试 
流程 的 改进 意见 和 对 流程 进行 优化 ,以 逐步 完善 流程 管理 自动 化 。 

(2) 部 署 Mercury QuickTest Professional, 完 成 对 应 用 程序 的 相关 功能 测试 。 


2. 中 期 实施 阶段 

(1) 通过 Mercury 集成 Rational 的 需求 管理 工具 RequisitePro ,实现 测试 需求 的 管 
理 。 并 利用 现 有 的 Mercury Quality Center 平台 引入 测试 案例 管理 流程 ,把 所 有 基于 
Word 和 Excel 的 旧 有 案例 ,利用 Mercury 提供 的 转换 工具 导入 到 TestDirector 中 ,从 而 
建立 可 供 参 考 和 追踪 的 测试 案例 库 。 同 时 ,由 测试 部 门 协调 整个 执行 过 程 ,对 测试 环境 、 
测试 数据 .被 测 系统 (SED) 的 调配 实现 统一 管理 ,避免 可 能 存在 的 各 部 门 竞 争 测试 资源 的 
状况 。 

(2) 部 署 Mercury LoadRunner。 从 测试 团队 中 分 化 出 专职 的 自动 化 性 能 测试 小 组 。 
通过 与 业务 部 门 协调 ,建立 A 公司 应 用 系统 上 线性 能 指标 。 值 得 注意 的 是 ,基于 A 公司 
应 用 系统 的 地 域 分 布 性 ,在 通过 公司 内 网 远程 执行 LoadRunner 测试 案例 时 受到 现 有 网 
络 带宽 的 限制 ,很 难 达 到 测试 效果 。 尽 管 HP Mercury 公司 建议 A 公司 引进 Mercury 
Performance Center 平 台 以 实现 整合 和 远程 操控 ,但 由 于 公司 预算 和 目前 对 性 能 测试 的 
技能 尚 不 足以 建立 整合 平台 ,A 公司 最 终 没 有 采纳 该 建议 。 最 后 ,由 于 性 能 测试 通常 是 
在 业务 应 用 经 过 了 一 轮 的 系统 测试 以 后 进行 的 ,A 公司 决定 把 性 能 测试 实验 室 环境 集中 
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在 一 处 ,并 将 需要 进行 性 能 测试 的 应 用 发 布 到 该 实验 室 进 行 统一 测试 。 

(3) 对 已 经 开始 的 功能 测试 自动 化 进行 优化 ,从 测试 小 组 中 筛选 出 自动 化 测试 专家 ， 
负责 A 公司 自动 化 测试 库 的 建立 ,进一步 提升 软件 测试 自动 化 的 价值 。 

3. 长 期 实施 阶段 

(1) 由 于 自动 化 测试 管理 的 进行 ,测试 缺陷 和 测试 案例 已 被 大 量 收集 ,过 程 也 正在 逐 
步 优化 。A 公司 考虑 在 Quality Center 平台 上 实现 “软件 质量 门户 ”的 思想 , 即 与 公司 应 
用 软件 质量 相关 的 信息 都 可 以 通过 该 平台 来 得 到 ,相关 流程 都 可 以 通过 这 个 平台 实现 , 包 
括 作为 一 个 质量 门户 必须 提供 的 针对 软件 质量 管理 和 软件 测试 过 程 中 不 同人 员 角 色 所 定 
义 的 视图 ,衡量 软件 质量 和 测试 流程 效率 的 关键 绩效 指标 , 除 测试 过 程 管理 以 外 的 服务 支 
持 管理 (如 变更 管理 .配置 管理 ,发 布 管理 ) 等 。 

(2) 考虑 整合 A 公司 的 测试 团队 和 其 他 分 部 的 非 全 职 测 试 人 员 ,整合 各 个 团队 的 测 
试 经 验 和 资源 ,建立 独立 的 软件 质量 管理 和 测试 中 心 。 


11.2 SQL Server 2000 压力 测试 


11.2.1 测试 项 目 概述 

2000 年 ,Microsoft 公司 推出 了 新 一 代 关 系数 据 库 系 统 SQL Server 2000。 用 户 纷纷 
对 其 在 数量 级 或 容量 级 的 数据 量 下 的 性 能 表现 寄予 很 高 的 期 望 。SQL Server 2000 被 推 
出 后 不 久 , 某 公司 对 其 进行 了 压力 测试 ,测试 它 在 大 记录 量 和 大 容量 情况 下 的 性 能 。 
11.2.2 测试 计划 

整个 测试 过 程 分 为 两 个 部 分 : 第 一 部 分 是 数据 库 大 容量 状态 下 的 执行 情况 ,第 二 部 
分 是 数据 库 在 大 记录 量 下 的 执行 情况 。 为 了 方便 测试 ,编写 了 一 个 程序 进行 各 种 数据 库 
操作 ,并 进行 效率 记录 。 

在 两 个 部 分 的 测试 中 ,分 别 在 空 数据 库 环 境 下 进行 各 种 数据 库 基本 操作 ,并 记录 各 个 
操作 所 需要 的 时 间 ,然后 插入 了 大 容量 /大 记录 量 的 数据 后 ,再 进行 同样 的 操作 并 记录 操 
作 所 需 时 间 。 最 后 对 前 后 的 时 间 进 行 比 较 。 由 于 网 络 传输 等 问题 ,可 能 导致 一 些 误差 ,但 
这 对 测试 不 会 有 太 大 的 影响 。 

11.2.3 测试 准备 


1. 测试 环境 

本 次 测试 的 测试 环境 为 : 

OS: Windows 2000 Server; 

Database: Microsoft SQL Server 2000; 
Database Server: ADV 2000。 


2. 创建 数据 库 


使 用 “企业 管理 器 ”在 数据 库 服 务 器 上 创建 数据 库 test, 并 且 设 置 其 大 小 为 10GB, 以 
避免 在 默认 容量 下 , 随 着 数据 库容 量 增加 而 导致 服务 器 动态 分 配 磁盘 空间 的 时 候 引 起 


开销 。 
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随后 再 在 test 数据 库 上 创建 一 个 Tab 表 , 包 含 字段 如 表 11-1 所 示 。 


表 11-1 Tab 表 中 的 字段 


字段 名 数据 类 型 可 否 为 空 
id( 主 键 ) Int, 4 不 可 
name Char, 10 不 可 
age Int, 4 不 可 
photo Image, 16 可 


测试 人 员 还 使 用 Delphi 6 编写 了 一 个 测试 程序 ,采用 ADO 接口 ,连接 数据 库 服务 器 
ADV 2000。 测 试 程序 主要 完成 以 下 功能 : 
插入 2000 条 数据 (Insert); 
选择 1000 条 数据 (Select); 

更 新 1000 条 数据 (Update); 

删除 1000 条 数据 (Delete); 

插入 100000 条 带 图 片 数 据 ( 用 于 大 容量 测试 ); 

插入 1000000 条 不 带 图 片 数据 (用 于 大 记录 量 测试 )。 
11.2.4 测试 过 程 

整个 测试 过 程 分 为 大 容量 数据 测试 和 大 记录 量 数据 测试 。 

1. 大 容量 数据 测试 

在 大 容量 数据 测试 中 ,通过 插入 图 片 来 使 数据 库 的 容量 膨胀 。 在 以 下 的 所 有 数据 库 
操作 中 ,都 是 对 带 图 片 的 数据 进行 操作 。 测 试 中 选择 了 一 张 41958B 的 图 片 , 大 容量 测试 
是 在 插入 100000 条 记录 以 后 的 测试 ,因此 可 以 大 致 估计 当时 的 数据 表 的 容量 为 (41958X 
100000)/(1024X 1024)=4001. 43MB。 

被 测 程序 首先 按 顺 序 执行 如 下 测试 : 在 空 表 中 ,插入 (Insert)2000 条 记录 一 选择 
(Select)1000 条 记录 一 更 新 (Update)1000 条 记录 一 删除 (Delete)1000 条 记录 ,并 记录 下 
各 操作 所 需要 的 时 间 。 测 试 结果 如 表 11-2 所 示 。 

表 11-2 测试 结果 (1) 


记录 数 /条 Insert 2000 Select 1000 Update 1000 Delete 1000 


操作 时 间 /s 132.781 41. 94 0. 841 1.552 


以 上 测试 是 在 空 数 据 表 中 进行 数据 库 的 各 种 基本 操作 , 接 下 来 测试 人 员 插入 100000 条 
带 有 图 片 的 记录 ,使 数据 表 的 数据 量 膨 胀 到 4001. 43MB, 以 测试 大 容量 环境 下 的 各 种 数 

同样 按照 如 下 步骤 进行 测试 : 插入 2000 条 记录 ~ 选择 1000 条 记录 一 更 新 1000 条 
记录 -~ 删除 1000 条 记录 ,并 记录 下 各 操作 的 时 间 。 测 试 结果 如 表 11-3 所 示 。 


> 
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表 11-3 测试 结果 (2) 
记录 数 /条 Insert 2000 Select 1000 Update 1000 Delete 1000 
操作 时 间 /s 139. 05 42. 36 0. 971 2. 264 


比较 两 种 环境 下 的 测试 结果 。 表 11-4 列 出 的 是 在 大 容量 数据 环境 下 ,同样 操作 增加 
的 时 间 与 初始 数据 库 环 境 下 所 需 时 间 的 百分比 。 可 以 看 出 ,Update 和 Delete 操作 在 大 容 
量 数 据 环 境 下 的 性 能 损失 严重 。 但 是 考虑 到 ,因为 存 取 的 数据 库 服务 器 与 客户 端 位 于 不 
同 的 机 器 上 ,虽然 通过 100MB 的 内 部 网 连接 ,但 是 由 于 网 络 的 问题 ,导致 了 存 取 中 网 络 的 
延 时 。 当 操作 所 需要 的 时 间 比 较 大 的 时 候 , 这 一 点 延 时 对 时 间 比 例 影响 不 大 ,而 一 旦 操作 
所 需要 的 时 间 比 较 短 的 时 候 , 这 个 延 时 就 显得 尤为 突出 。 

对 于 Delete 操作 中 的 45. 88% 的 性 能 损失 ,还 有 一 个 原因 是 , 当 删 除 记 录 的 时 候 , 数 
据 库 会 重建 索引 。 当 数据 量 太 大 时 ,导致 重建 索引 耗费 了 较 多 的 时 间 。 


表 11-4 两 种 环境 下 的 测试 结果 比较 
记录 数 /条 Insert 2000 Select 1000 Update 1000 Delete 1000 
时 间 增 加 百分比 /% 4.72 1.001 15. 46 45. 88 


2. 大 记录 量 数据 测试 

为 了 让 大 容量 数据 测试 不 影响 大 记录 量 数据 测试 ,首先 彻底 删除 大 容量 测试 中 使 用 
的 表 Tab ,并 且 重 新 创建 一 个 完全 一 样 的 新 表 Tab 用 于 大 记录 量 数据 测试 。 

该 测试 的 步骤 与 大 容量 数据 测试 基本 一 样 ,同样 测试 了 空 表 状况 下 各 个 基本 数据 库 
操作 所 需要 的 时 间 ,但 测试 人 员 没 有 在 这 个 测试 中 搬入 图 片 ,photo 字段 为 空 。 按 以 下 步 
又 进行 测试 : 插入 2000 条 记录 ~ 选择 1000 条 记录 -更 新 1000 条 记录 一 删除 1000 条 记 
录 , 并 记录 下 各 操作 的 时 间 ,测试 结果 如 表 11-5 所 示 。 

表 11-5 测试 结果 (3) 


记录 数 /条 Insert 2000 Select 1000 Update 1000 Delete 1000 


操作 时 间 /s 16. 274 0.07 0.04 0.04 


在 大 容量 数据 环境 下 ,插入 的 是 100000 条 带 有 图 片 的 数据 ,数据 量 达 到 
4001.43MB ,而 在 该 大 记录 量 环境 下 的 测试 ,100000 条 数据 量 已 经 不 能 满足 测试 人 员 的 
需要 ,测试 人 员 和 希望 能 在 更 高 数据 量 的 环境 下 进行 测试 ,以 便 增 大 加 入 大 数量 级 数据 前 后 
操作 效率 的 差异 ,因此 选择 插入 1000000 条 数据 。 

完成 了 大 数量 级 的 数据 插入 后 ,再 按 如 下 顺序 进行 测试 : 插入 2000 条 记录 一 选择 
1000 条 记录 一 更 新 1000 条 记录 一 删除 1000 条 记录 ,记录 下 每 一 个 操作 所 需要 的 时 间 。 
测试 结果 如 表 11-6 所 示 。 

表 11-6 测试 结果 (4) 


记录 数 /条 Insert 2000 Select 1000 Update 1000 Delete 1000 


操作 时 间 /s 16. 574 0.05 0.05 0.051 
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比较 两 种 环境 下 的 测试 结果 , 表 11-7 表示 的 是 在 大 记录 量 数据 环境 下 ,同样 操作 增 
加 的 时 间 与 初始 数据 库 环 境 下 所 需 时 间 的 百分比 。 


表 11-7 两 种 环境 下 的 测试 结果 比较 


记录 数 /条 Insert 2000 Select 1000 Update 1000 Delete 1000 
时 间 增 加 百分比 /% 1.84 一 28.6 25 27.5 


从 表 11-7 可 以 看 出 Insert, Update,Delete 操作 在 大 记录 量 数据 环境 下 性 能 有 所 损 
失 ,但 测试 人 员 无 法 判断 是 否 是 因为 这 些 操作 的 操作 时 间 太 短 , 还 是 由 于 网 络 引 起 的 
误差 。 
11.2.5 测试 结果 

虽然 在 测试 中 ,很 多 SQL 操作 因为 所 需 时 间 过 短 而 导致 受到 网 络 传输 的 影响 。 但 是 ， 
测试 人 员 仍 可 通过 所 需 时 间 较 长 的 SQL 操作 对 SQL Server 2000 的 性 能 进行 如 下 总 结 。 

无 论 是 在 大 容量 ( 数 GB) 还 是 大 记录 量 ( 百 万 条 记录 量 ) 环 境 下 ,SQL Server 2000 的 
性 能 都 能 保持 较 高 的 水 平 。 一 般 情 况 下 的 性 能 损失 小 于 5% ,因此 完全 能 够 满足 企业 通 
常 的 应 用 。 

但 由 于 硬件 等 条 件 的 限制 ,无 法 对 更 大 容量 (10'GB,10?*GB 乃至 TB 容量 级 ) 及 更 大 
记录 量 (10* 量 级 记录 量 ) 环 境 下 SQL Server 2000 的 性 能 进行 测试 。 

总 体 说 来 ,在 普通 的 企业 级 应 用 中 ,SQL Server 2000 已 经 能 够 满足 应 用 要 求 。 


11.3 某 金 融 业 务 系统 的 性 能 测试 


11.3.1 测试 项 目 概述 

被 测 系统 是 一 个 运行 在 城 域 网 上 的 大 型 分 布 式 金融 业务 系统 。 其 遵循 J]2EE 规范 ， 
采用 B/S 体系 结构 进行 设计 和 开发 。 处 理 的 业务 主要 分 为 交易 业务 和 查询 业务 。 系 统 
体系 结构 如 图 11-1 所 示 。 体 系 结构 中 的 各 部 分 解释 如 下 。 

(1) 表示 层 

运行 在 终端 E。 运 行 Java Applet 程序 ,提供 协议 控制 和 用 户 界面 ,与 系统 最 终 用 户 
实现 直接 交互 ,通过 TCP/HTTP 与 前 置 系统 通信 。 向 前 置 系统 发 送 请 求 报 文 ,并 接收 前 
置 系统 返回 的 回应 报 文 。 

(2) 商业 逻辑 层 

商业 逻辑 层 作为 中 间 层 实现 核心 业务 逻辑 服务 ,包括 交易 应 用 服务 、 交 易 前 置 服务 和 
查询 前 置 服务 。 

其 中 ,交易 应 用 服务 运行 在 交易 主机 上 。 在 Tuxedo 中 间 件 上 和 运行 业务 处 理 程序 , 按 
交易 规则 处 理 前 置 机 发 来 的 交易 指令 ,通过 Tuxedo Jolt 与 前 置 机 连接 ,通过 DB2 C API 
与 数据 库 连 接 。 

交易 前 置 服务 和 查询 前 置 服务 运行 在 前 置 机 上 。 交 易 前 置 服务 运行 服务 程序 接收 终 
端 请 求 报 文 并 通过 Tuxedo Jolt 客户 端 将 其 转发 给 交易 主机 ,再 通过 轮 询 和 同步 反馈 接 
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数据 库 数据 层 


DB2 C API 
交易 应 用 服务 
Tuxedo 中 间 件 商业 逻辑 层 
查询 前 置 服务 


表示 层 
Java Applet 


图 11-1 被 测 系统 体系 结构 图 


收 交易 主机 返回 的 报 文 ,将 其 转发 给 业务 终端 ;查询 前 置 服务 运行 在 WebLogic 应 用 服务 
器 上 并 调用 JReport 组 件 ,通过 JDBC 完成 对 查询 流 指令 的 发 送 并 接受 数据 库 返 回 的 结 
果 给 业务 终端 。 

(3) 数据 层 

数据 层 运行 在 数据 库 主 机 上 。 负 责 整 个 系统 中 数据 信息 的 存储 ,访问 及 其 优化 。 数 
据 层 运行 DB2 数据 库 服务 程序 ,通过 DB2 C API 与 交易 主机 通信 ,并 通过 JDBC 与 查询 
前 置 服务 通信 。 数 据 库 主 机 和 交易 主机 运行 在 交易 中 心 城市 ,前 置 机 运行 在 各 个 分 中 心 
城市 ,终端 为 各 个 城市 参加 交易 的 单位 ,整个 系统 覆盖 城 域 网 。 
11.3.2 被 测 系统 的 性 能 要 求 

金融 系统 是 业务 处 理 十 分 频繁 ,数据 吞吐 量 极 大 的 系统 ,业务 处 理 的 速度 将 直接 关系 
到 公司 的 经 济 效 益 和 客户 对 公司 的 评价 。 在 客观 条 件 下 ,系统 必须 在 大 业务 量 情况 下 同 
时 保持 快速 的 实时 响应 能 力 , 以 保证 整个 业务 系统 的 通畅 运行 。 用 户 对 该 系统 提出 的 性 
能 要 求 如 表 11-8 所 示 。 用 户 的 性 能 要 求 是 进行 性 能 测试 的 依据 。 

表 11-8 用户 要 求 的 性 能 指标 
指标 种 类 用 户 需 求 

登录 系统 能 够 处 理 750 用 户 /min, 至 少 支持 上 百 用 户 并 发 .登录 响应 时 间 不 超过 30s 
交易 | 系统 能 够 处 理 300 笔 /min, 响 应 时 间 不 超过 10s 
查询 | 系统 能 够 处 理 400 笔 /min, 响 应 时 间 不 超过 10s 


业务 
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11.3.3 性 能 测试 过 程 


1. 对 被 测 系统 进行 系统 分 析 

被 测 系统 大 体 上 由 终端 .前 置 机 、 交 易 主机 、 数 据 库 主机 节点 组 成 。 在 整个 业务 流程 
中 ,业务 终端 一 前 置 机 一 交易 主机 一 数据 库 主机 形成 了 一 个 压力 流 串 ,每 个 节点 在 压力 下 
能 够 正常 工作 是 整个 系统 正常 运转 的 基础 。 也 就 是 说 ,如 果 其 中 任意 一 个 节点 在 业务 压 
力 下 发 生 了 拥塞 .处理 不 力 等 不 正常 情况 , 则 整个 系统 都 无 法 正常 运转 。 

系统 的 业务 流程 如 下 。 

首先 ,从 终端 到 前 置 机 ,终端 产生 业务 报 文 发 送 至 前 置 机 ,前 置 机 上 和 运行 查询 前 置 服 
务 和 交易 前 置 服务 ,查询 前 置 服务 向 下 通过 HTTP 协议 以 Web 服务 形式 和 终端 连接 ,向 
上 通过 JDBC 直接 与 数据 库 系 统 相连 。 交 易 前 置 服务 向 下 通过 基于 TCP 协议 的 Socket 
连接 和 终端 通信 ,向 上 通过 Tuxedo Jolt 客户 端 和 交易 应 用 服务 连接 。 交 易 应 用 服务 进 
行业 务 罗 辑 计算 ,并 操作 数据 库 系统 。 

由 上 述 分 析 可 以 整理 出 整个 系统 的 两 条 压力 流程 线 , 之 所 以 分 为 两 条 流程 线 , 是 因为 
交易 前 置 服务 和 查询 前 置 服务 的 工作 原理 完全 不 同 , 下 与 终端 的 连接 ,上 与 交易 主机 的 连 
接 也 是 完全 独立 的 两 个 通路 , 即 : 

@ 终端 一 交易 前 置 机 一 交易 主机 一 数据 库 系 统 。 

@ 终端 ~ 查询 前 置 机 一 数据 库 系统 。 

下 面 先 独立 分 析 两 条 流程 线 , 再 综合 分 析 二 者 之 间 的 相互 影响 。 

第 一 条 路 线 上 主要 运行 的 是 登录 指令 和 交易 指令 信息 。 

当 系统 运作 时 ,多 个 交易 终端 与 交易 前 置 服务 建立 Socket 连接 ,完成 登录 ,之 后 发 送 
交易 指令 ,造成 对 交易 前 置 服务 的 压力 。 交 易 前 置 服务 通过 运行 服务 程序 接收 到 交易 指 
令 , 并 检验 其 合法 性 ,然后 通过 交易 中 间 件 Tuxedo 的 客户 端 把 业务 的 压力 传递 给 交易 主 
机 进行 处 理 。 交 易 主 机 进行 必要 的 金融 计算 和 业务 逻辑 运行 ,得 出 反馈 结果 ,生成 消息 ， 
一 方面 顺 原 路 返回 到 各 个 终端 上 去 ,一 方面 记录 到 数据 库 中 。 

在 本 条 流程 线 上 的 加 压 主要 考验 交易 前 置 服务 程序 的 Socket 多 连接 建立 能 力 ， 
Tuxedo 交易 中 间 件 的 即时 响应 能 力 ,交易 主机 的 计算 能 力 , 以 及 DB2 数据 库 的 DML 语 
句 加 锁 机 制 。 

第 二 条 路 线 上 主要 运行 的 是 查询 指令 信息 。 

查询 指令 产生 时 ,通过 HTTP 协议 访问 WebLogic 上 的 Web 服务 器 和 应 用 服务 器 上 
的 相应 组 件 , 以 JDBC 接口 访问 后 台 的 DB2 数据 库 , 并 把 数据 库 返回 的 结果 发 送 至 终端 
界面 。 在 本 条 流程 线 上 的 加 压 主 要 验证 WebLogic 处 理 能 力 , 以 及 数据 库 中 索引 是 否 创 
建 合理 。 

两 条 流程 线 相对 独立 ,但 又 是 互相 依赖 的 。 由 于 是 对 同一 个 数据 库 系 统 进行 读 操作 
和 写 操作 ,查询 流程 的 结果 依赖 于 交易 流程 数据 的 产生 ,交易 流程 产生 的 数据 又 通过 查询 
流程 得 到 验证 。 在 进行 压力 测试 时 ,两 者 的 协同 会 对 数据 库 形成 压力 的 冲击 。 

由 以 上 分 析 , 结 合用 户 要 求 的 性 能 指标 ,决定 把 本 次 性 能 测试 分 解 为 如 下 两 种 子 测 试 
进行 。 
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Q 并 发 登录 测试 : 750 个 终端 1 分 钟 内 并 发 登录 系统 , 且 响 应 时 间 应 在 30 秒 之 内 。 


@ 业务 负载 测试 。 


业务 负载 测试 含有 3 个 子 测试 如 下 : 


@ 交易 流程 测试 。 多 个 终端 发 起 交易 请 求 ,逐渐 加 压 , 以 达到 300 笔 /s 的 压力 为 限 。 

@ 查询 流程 测试 。 多 个 终端 进行 查询 ,逐渐 加 压 , 以 达到 400 笔 /s 的 压力 为 限 。 查 
询 成 功 与 否 以 所 请 求 的 Web 页 面 完 全 展现 为 标准 。 实 际 上 ,查询 响应 能 力 与 数据 库 中 的 
数据 量 有 关系 ,后 来 经 与 用 户 进一步 确认 ,基础 数据 为 30 万 条 。 

@ 综合 测试 。 在 上 面 两 种 测试 都 通过 的 情况 下 ,进行 综合 测试 。 


2. 性 能 测试 的 执行 过 程 


对 被 测 系统 进行 系统 分 析 ,确立 了 测试 方案 后 ,本 性 能 测试 依照 以 下 的 步 又 执行 。 


(1) 测试 脚本 的 开发 


本 性 能 测试 利用 HP Mercury 公司 的 LoadRunner 进行 ,脚本 编辑 和 编译 工作 在 


Virtual User Generator 中 完成 。 


对 于 并 发 登录 测试 和 交易 流程 测试 ,两 者 运行 机 理 相 同 , 都 是 终端 调用 Socket 
client, 和 交易 前 置 的 Socket server 建立 连接 ,将 请 求 消息 发 送 至 交易 前 置 机 。 故 将 此 部 
分 Java Socket 程序 编 人 测试 脚本 程序 ,生成 登录 和 交易 业务 脚本 ,通过 LoadRunner 执 
行 。 这 样 做 的 好 处 是 绕 过 终端 IE 界面 复杂 的 处 理 逻 辑 ,直接 施 压 在 前 置 机 上 。 

脚本 除了 需要 实现 与 前 置 机 的 Socket 连接 .业务 发 送 等 功能 ,还 要 建立 用 户 信息 数 
据 池 ,设置 检测 点 、 异 常 退出 点 ,为 脚本 执行 后 的 结果 统计 和 分 析 提 供 正确 的 依据 。 


交易 业务 脚本 的 核心 内 容 如 下 。 


public class Actions 

{ 
/* 登录 变量 初始 化 */ 
Protocol Manager protocol; 
ServiceName service; 


LoginMessage login; 


protocol= new ProtocolManager(); 
service= ServiceName. getInstance(); 
login=new LoginMessage(); 

service. setIP("202. 31. 10. 18"); 
service. setPort(17777); 


/* 设 置 登 录 消息 */ 


//ProtocolManager 为 实现 Socket 连接 的 类 
//ServiceName 对 服务 端的 信息 进行 了 封装 ,包括 
//IP 地 址 和 端口 号 

//LoginMessage 为 登录 时 需要 向 服务 器 发 送 的 消 
// 息 , 待 服务 器 确认 并 返回 回应 消息 时 登录 成 功 
// 创 建 ProtocolManager 类 protocol 对 象 

// 获 得 ServiceName 实例 

// 创 建 LoginMessage 类 login 对 象 

// 设 置 服务 端 IP 地 址 

// 设 置 服务 端 端口 号 


login. setUserName(lr. eval. string(" (loginName}")); // 从 数据 池 里 读 出 用 户 名 ,设置 在 


login. setPasswd("1234"); 

/* 发 送 登 录 消 息 */ 
protocol. login(login) ; 
lr_start_transaction("trade"); 
TradeMessage trademessage; 


/* 设 置 交 易 消息 */ 


//login 成 员 变量 里 
// 数 据 库 中 添加 的 用 户 密码 都 为 1234 


// 发 送 登录 消息 
// 交 易 开始 点 
// 生 成 交易 消息 
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/* 发 送 交易 消息 * / 


if(sendfail) 
lr_end_transaction("trade" ,LR_FAIL); // 如 果 发 送 交 易 消息 失败 ,交易 结束 ,返回 
/* 循环 回收 主机 返回 的 处 理 信息 */ 


if(recievefail) 
lr_end_transaction("trade", LR_FAIL); // 如 果 不 能 接收 到 主机 处 理 回 应 消息 ,交易 结束 ， 
// 返 回 
if(recievesuccess) 
lr_end_transaction("trade", LR_PASS); // 如 果 接 收 到 主机 成 功 处 理 的 回应 消息 ,交易 结 
// 东 ,返回 


} 


在 上 面 的 例子 中 ,主要 对 每 笔 交 易 进 行 了 Transaction 化 。 在 交易 开始 时 设置 开始 
检测 点 ,交易 结束 时 设置 结束 检测 点 ,并 向 LoadRunner 报 出 交易 状态 。 实 际 的 脚本 中 在 
回收 交易 响应 消息 时 还 进行 了 拆 包 ,在 应 用 层 上 对 交易 状态 进行 识别 ,并 非 例 子 中 只 在 
Socket 层 加 以 判断 。 

对 于 查询 流程 测试 ,由 于 LoadRunner 工具 支持 基于 HTTP 的 Web 访问 录制 功能 ， 
故 采 用 录制 脚本 为 主 ,手工 编写 脚本 为 辅 的 方法 ,生成 查询 业务 脚本 ,通过 LoadRunner 
来 执行 。 

(2) 根据 用 户 的 性 能 要 求 创立 测试 场景 

在 本 次 性 能 测试 中 ,用 户 提 出 的 性 能 指标 不 够 细致 和 确切 ,测试 人 员 通 过 对 用 户 调查 
和 实际 业务 分 析 , 将 性 能 指标 的 实现 方式 进行 了 明确 的 定位 。 

@ 并 发 登录 测试 场景 。 并 发 登录 750 用 户 /min, 登 录 响应 时 间 在 30s 之 内 。 这 里 的 
并 发 登录 750 用 户 /min 指 的 是 系统 能 够 在 1min 内 接受 750 个 用 户 的 登录 请 求 , 而 处 理 
的 效果 如 何 则 在 交易 终端 体现 , 即 登 录 响 应 时 间 。 基 于 这 样 的 理解 ,把 用 户 性 能 指标 转化 
为 如 下 的 测试 场景 : 

从 第 一 秒 钟 开始 ,用 LoadRunner 每 秒 钟 登录 13 个 用 户 , 并 保持 Socket 连接 ,直到 
1 分 钟 结束 ,从 终端 向 系统 一 共 发 送 750 个 左右 的 用 户 登 录 请 求 。 在 终端 观察 并 统计 登 
录 响 应 时 间 。 如 果 系 统 不 能 响应 持续 增加 的 登录 请 求 或 平均 登录 响应 时 间 大 于 30s, 则 

为 了 帮助 用 户 更 加 深入 了 解 系统 的 能 力 , 还 对 系统 的 瞬时 并 发 能 力 进行 了 测试 , 即 测 
试 系统 所 能 承受 的 最 大 的 瞬时 并 发 用 户 登 录 连 接 请 求 个 数 。 这 个 场景 通过 LoadRunner 
在 登录 前 设置 同步 点 来 实现 ,这 个 结果 将 结合 上 一 个 结果 共同 反映 系统 的 登录 处 理 能 力 。 

@ 交易 流程 和 查询 流程 测试 场景 。 在 这 里 只 对 系统 的 业务 负载 能 力 做 测试 (并 发 处 
理 能 力 在 登录 测试 中 已 得 到 验证 )。 测 试 场景 如 下 : 在 LoadRunner 中 ,建立 goal- 
oriented 的 测试 场景 ,以 400 笔 /s 为 目标 ,将 调度 权 交 给 LoadRunner 来 试图 达到 这 个 
指标 。 

Q 综合 测试 场景 。 交 易 流程 测试 和 查询 流程 测试 同时 进行 。 


软件 测试 


以 上 的 测试 场景 要 求 均 可 在 LoadRunner 中 的 Controller 进行 设置 完成 。 
(3) 运行 测试 场景 ,同步 监测 被 测 系统 性 能 
在 LoadRunner 中 的 Controller 中 开启 UNIX 系统 资源 计数 器 .WebLogic 计数 器 、 
DB2 计数 器 ,检测 系统 资源 消耗 情况 ,并 最 终 与 和 测试 结果 数据 合并 ,成 为 分 析 图 表 。 
测试 结果 可 在 测试 执行 完毕 ,通过 LoadRunner 中 的 Analysis( 分 析 器 ) 获 得 。 
。 并 发 登录 测试 。 依 照 设 计 好 的 测试 场景 ,用 LoadRunner 工具 在 1min 内 渐 增 地 
向 系统 发 送 登录 请 求 。 分 别 进 行 3 次 ,结果 如 表 11-9 所 示 。 


表 11-9 登录 测试 结果 


测试 序列 登录 成 功 的 用 户 数 平均 响应 时 间 (s/ 笔 ) 
1 485 25.6 
2 497 27.3 
3 482 26.2 


这 里 的 登录 成 功用 户 指 的 是 系统 接受 了 登录 请 求 ,并 建立 了 连接 。 为 获取 平均 响应 
时 间 , 可 在 登录 脚本 里 设置 检测 点 ,由 LoadRunner 工具 自动 获得 。 

为 考查 系统 的 瞬时 并 发 处 理 能 力 ,在 完成 上 一 步 测试 的 前 提 下 ,逐步 增加 瞬时 并 发 登 
录用 户 数 ,直到 系统 极限 。 测 试 执行 结果 如 表 11-10 所 示 。 


表 11-10 瞬时 并 发 登录 测试 结果 


瞬时 并 发 用 | 计划 并 发 数 1 2 10 100 200 
户 数 实际 并 发 数 | 10 100 122 
最 短 /s 2.0 3.1 这 21.2 24.2 
ee 平均 /s 2.0 和 3 12.2 24. 3 28.1 
最 长 /s 2.0 355 16.5 31.2 33.3 
。 负载 测试 。 
Q@ 交易 流程 测试 。 交 易 流程 测试 结果 如 下 。 
对 于 通过 网 络 接口 发 送 的 批量 业务 请 求 , 均 在 性 能 指标 所 指定 的 时 间 范 围 内 得 到 请 


求 成 功 的 反馈 消息 ,说 明 主 机 已 经 处 理 成 功 。 

在 通过 网 络 接口 发 送 业 务 请 求 的 同时 ,开启 Internet Explorer, 通 过 实际 终端 界面 进 
行 登录 和 交易 ,系统 响应 时 间 延 长 ,界面 显示 和 刷新 明显 变 慢 ,到 业务 量 高 峰 时 期 ,界面 已 
经 不 能 显示 任何 信息 ,处 于 不 可 工作 的 状态 。 

需要 说 明 的 是 ,系统 正常 工作 时 ,每 个 界面 终端 不 仅 应 该 能 够 展示 己方 的 交易 信息 ， 
还 要 展示 其 他 交易 单位 的 交易 信息 和 系统 信息 。 因 此 当 交 易 量 大 的 时 候 , 界 面 需要 展示 
的 信息 量 是 巨大 的 ,这 本 身 对 终端 界面 是 一 个 性 能 考验 。 

@ 查询 流程 测试 。 本 流程 测试 在 交易 流程 测试 之 后 进行 ,以 利用 其 生成 的 数据 。 测 
试 结果 基本 满足 性 能 指标 。 
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综合 测试 。 由 于 交易 流程 测试 未 通过 ,本 测试 已 经 不 能 执行 。 

(4) 测试 结果 分 析 及 性 能 评价 

@ 并 发 登录 测试 结果 分 析 。 根 据 表 11-9 和 表 11-10 可 以 得 出 以 下 结论 : 

。 被 测 系 统 在 一 分 钟 内 并 不 能 接受 750 个 用 户 的 登录 请 求 , 其 可 接受 的 登录 请 求 用 

户 数 约 为 490 个 。 在 这 样 的 条 件 下 ,登录 响应 时 间 在 用 户 要 求 范围 之 内 。 

。 被 测 系统 的 瞬时 并 发 处 理 能 力 约 为 122 个 用 户 。 

@ 交易 流程 测试 结果 分 析 。 根 据 交 易 流 程 测试 结果 可 知 , 通 过 脚本 程序 进行 业务 行 
为 ,发 送 业 务 请 求 消息 到 回收 主机 处 理 回应 消息 ,这 段 时 间 系 统 是 顺畅 的 ,反应 也 是 迅速 
的 ,但 是 在 终端 界面 却 不 能 即时 展现 消息 。 这 说 明 信 息 的 回馈 通路 在 终端 界面 出 现 了 性 
能 瓶颈 。 当 界面 需要 在 短 时 间 内 展示 大 量 交易 信息 时 ,已 经 不 能 承受 负荷 。 这 与 终端 采 
用 Java Applet 技术 有 关 。 

@ 查询 流程 测试 结果 分 析 。 查 询 流程 基本 符合 性 能 指标 。 

需要 说 明 的 是 ,实际 中 ,以 上 每 个 场景 的 测试 都 执行 了 多 次 ,中 间 件 参数 进行 了 多 次 
的 调 优 。 从 以 上 测试 的 结果 分 析 也 可 以 看 出 ,性 能 测试 瓶颈 不 是 出 现在 中 间 件 产品 上 ,而 
是 在 自身 开发 的 程序 上 。 


11.4 小 结 


本 章 对 3 个 具体 的 软件 测试 案例 进行 了 介绍 ,其 中 包括 一 个 企业 自动 化 测试 方案 选 
型 案例 和 两 个 性 能 测试 案例 。 通 过 本 章 的 学 习 , 可 加 强 对 软件 测试 的 综合 体验 。 但 由 于 
项 目 背 景 ,测试 需求 ,公司 偏好 的 不 同 , 软 件 测试 的 案例 千变万化 。 这 些 案例 显然 不 能 歧 
括 软 件 测试 的 全 部 方法 和 技术 ,大 家 应 尝试 接触 更 多 的 测试 案例 ,最 好 是 亲身 投入 到 测试 
实践 中 。 


附录 人 


常见 的 软件 测试 术语 


英文 名 称 中 文 名 称 术语 简介 
、 以 用 户 为 主 的 测试 。 对 件 系统 进行 测试 和 评 
Acceptance Testing 验收 测试 人 人 
Actual Outcome 实际 结果 被 测 对 象 在 特定 条 件 下 执行 时 产生 的 结果 
- 和 没有 书面 测试 用 例 的 测试 。 主 要 是 根据 测试 者 的 经 
i ee 验 对 软件 进行 功能 和 性 能 抽查 
A a 软件 开发 公司 内 部 人 员 模 拟 各 类 用 户 对 即将 交付 的 
ee 机 软件 产品 进行 的 测试 。 一 般 在 可 控制 的 环境 下 进行 
Anomaly 异常 在 文档 或 软件 操作 中 观察 到 的 与 期 望 相 违背 的 结果 
Architecture 架构 一 个 系统 或 组 件 的 组 织 结构 
ASQ 自动 化 软件 质量 使 用 软件 工具 提高 软件 的 质量 
A 和 一 个 布尔 陈述 。 指 明 在 程序 执行 期 间 某 个 点 上 程序 
ssertion 「 百 变量 应 满足 的 条 件 
本 对 一 个 或 一 组 工作 产品 的 独立 检查 ,以 评价 它 与 规 
人 下 格 .标准 等 的 符合 程度 
Audit Trail 审计 跟踪 系统 审计 活动 的 时 间 记录 
Automated Testing “| 自动 化 测试 使 用 测试 工具 进行 测试 
在 软件 开发 中 经 过 正式 审核 作为 下 一 步 开 发 基础 的 
Baseline 基线 配置 项 ,是 项 目 情况 的 度量 点 及 对 后 继 开发 工作 进行 
验证 的 基准 
行 语气 > 分 支 
si 人 Rd ea 
确定 程序 的 环 路 复杂 性 ,导出 基本 路 径 集合 ,进而 在 
Basic Path Testing ”| 基本 路 径 测试 其 基础 上 设计 测试 用 例 , 这 些 测试 用 例 能 履 盖 程 序 中 
每 一 条 可 执行 语句 
Benchmark 基准 /标杆 可 用 于 度量 和 比较 的 标准 
由 用 户 进行 的 测试 。 目 的 在 于 帮助 开发 方 在 正式 发 
Beta Testing 8 测试 布 软件 产品 前 对 其 进行 最 后 的 改进 。 测 试 环境 一 般 


不 可 控 
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续 表 
英文 名 称 中 文 名 称 术语 简介 
属于 非 增值 式 集成 测试 方式 。 先 分 别 对 每 个 组 件 进 
Big-bang Integration | 记 次 性 集 成/ 大 爆炸 | 生 测试 ,然后 一 次 性 地 将 所 有 组 件 集成 在 一 起 进行 
手 入 测试 
站 和 二 tag 黑 盒 测试 不 考虑 系统 或 组 件 的 内 部 实现 ,根据 规格 说 明 对 其 进 
行 测试 
Boundary Value 边界 值 处 于 组 件 输入 等 价 类 或 输出 等 价 类 边界 上 的 值 
Boundary 边界 值 分 析 针对 组 件 的 输入 和 输出 等 价 类 边界 进行 分 析 , 使 设计 
Value Analysis 的 测试 用 例 能 达到 边界 值 覆盖 
Boundary 边界 值 著 盖 测试 用 例 设 计 方 法 。 通 过 设计 足够 多 的 测试 用 例 , 覆 
Value Coverage 人 盖 组 件 中 各 输入 和 输出 等 价 类 的 所 有 边界 值 
Branch 分 支 在 组 件 中 控制 从 某 语句 到 其 非 直接 后 继 语句 的 转移 
2 和 测试 一 个 软件 系统 或 组 件 的 所 有 功能 ,但 不 测试 其 更 
Breadth Testing 广度 测试 细节 的 特性 
Bug 缺陷 在 软件 系统 或 组 件 中 一 个 错误 的 表现 
Capture/Replay Tool | 捕获 /回放 工具 测试 工具 。 能 捕获 在 测试 过 程 中 传递 给 软件 的 输入 ， 


并 在 以 后 重复 执行 捕获 的 内 容 


CASE 


计算 机 辅助 软件 
工程 


即 Computer Aided Software Engineering。 支 持 软件 
开发 自动 化 的 一 套 方法 和 工具 


CAST 


计算 机 辅助 软件 
测试 


即 Computer Aided Software Testing。 通 过 使 用 测试 
工具 实现 测试 过 程 部 分 自动 化 的 测试 


Cause-effect Graph 


因果 图 


用 于 描述 输入 条 件 取 值 组 合 及 与 每 种 组 合 对 应 的 输 
出 的 图 形 , 可 在 其 基础 上 设计 测试 用 例 


Change Control 


变更 控制 


用 于 软件 开发 过 程 中 ,对 变更 进行 管理 ,确保 变更 有 
序 地 进行 


软件 能 力 成 熟 度 


即 Capability Maturity Model for Software。 是 一 个 率 
先 在 软件 行业 从 软件 过 程 能 力 的 角度 提出 的 软件 评 


CMM 模型 估 标 准 ,通过 它 能 评价 一 个 软件 机 构 开发 过 程 的 能 力 
成 熟 度 

由 人 或 工具 对 源 代 码 进行 的 独立 检查 ,以 评价 其 与 设 

Code Audit 代码 审计 计 规 格 ,编码 标准 等 的 一 致 性 

Code Coverage 代码 覆盖 率 一 个 测试 套 执行 后 ,对 组 件 中 代码 的 覆盖 程度 
正式 的 同行 评审 手段 。 审 查 小 组 成 员 依据 缺陷 检查 

Code Inspection 代码 审查 表 对 程序 中 的 逻辑 提出 疑问 ,检查 它 与 设计 规格 和 编 
码 规范 的 一 致 性 

Coding Standards 编码 规范 使 用 某 种 语言 编程 时 需要 遵循 的 标准 

Compatibility Testing | 兼容 性 测试 验证 软件 能 否 与 不 同 的 软件 协作 运行 的 测试 

Complexity 复杂 性 软件 系统 或 组 件 难 以 理解 或 验证 的 程度 

Component 组 件 最 小 的 软件 单元 ,有 独立 的 规格 


AN 


有 软件 测试 


续 表 
英文 名 称 中 文 名 称 术语 简介 
Component Testing 组 件 测 试 参见 单元 测试 
Co 计算 机 系统 安全 性 | 计算 机 软 硬 件 对 故意 的 (或 偶然 的 ) 破 坏 的 防御 能 力 
System Security 
Condition 条 件 分 为 简单 条 件 ( 关 系 表 达 式 ) 和 复合 条 件 (布尔 表达 
式 ), 取 值 为 真 或 假 
Condition Combination 条 件 组 合 覆盖 设计 足够 多 的 测试 用 例 ,覆盖 被 测 组 件 的 所 有 判定 中 
Coverage er 的 全 部 简单 条 件 取 值 组 合 
人 设计 足够 多 的 测试 用 例 ,使 被 测 组 件 中 的 每 个 简单 条 
Condition Coverage 条 件 覆 盖 件 取 到 各 种 可 能 的 结果 
Configuration 配置 管理 在 软件 开发 过 程 中 标识 .组 织 和 控制 变更 的 技术 。 目 
Management 的 是 使 错误 降 为 最 小 并 最 有 效 地 提高 开发 效率 
ee 配置 测试 验证 软件 能 否 与 相关 硬件 正常 地 协作 运行 的 测试 
Conformance Testing | 一 致 性 测试 i 
Control Flow 控制 流 程序 执行 过 程 中 所 有 可 能 的 事件 顺序 的 一 个 抽象 表示 
Control Flow Graph | 控制 流 图 通过 一 个 组 件 的 所 有 可 能 控制 流 路 径 的 图 形 表示 
Conversion Testing “| 转换 测试 一 种 用 于 测试 已 有 系统 的 数据 能 否 转换 到 营 代 系统 
上 的 测试 
c i 正确 性 软件 在 其 分 析 、 设 计 、 编 码 中 无 故障 的 程度 ;软件 、 文 
ee 档 及 其 他 项 满足 用 户 显 式 和 隐 式 需求 的 程度 
dae 团 盖 率 基于 某 种 覆盖 项 (如 语句 、 判 定 取 值 、 条 件 取 值 等 ), 测 
i i 试 执行 时 对 著 盖 项 的 荐 盖 比 例 
Crash 崩溃 系统 或 组 件 突 然 完全 丧失 功能 
Criticality 关键 性 需求 ,功能 实现 ,故障 等 对 系统 操作 或 开发 影响 的 程度 
Cnty naiysis 关键 性 分 析 对 需求 关键 性 的 分 析 , 用 于 给 每 个 需求 项 分 配 一 个 关 
键 级 别 
人 环 路 复杂 性 其 度量 值 等 于 程序 中 的 独立 路 径 数目 
Complexity 
结 
Data Dictionary 数据 字典 0 租 系 入 家 ,人 包 拓 对 数据 库 结构 和 相 
Data Flow Coverage | 数据 流 覆 盖 测试 覆盖 率 的 度量 是 根据 变量 在 代码 中 的 使 用 情况 
一 种 用 于 结构 化 分 析 的 图 形 工具 , 它 从 数据 传递 和 加 
Data Flow Diagram 数据 流 图 工 的 角度 刻画 系统 内 的 数据 运动 情况 。 有 4 种 基本 成 
分 : 加 工 、 数 据 流 、 数 据 存储 和 外 部 实体 
Data Flow Testing 数据 流 测 试 根据 代码 中 变量 的 使 用 情况 进行 的 测试 
Dead Code 死 代码 程序 中 永远 不 可 能 被 执行 到 的 代码 
Debugging 调试 寻找 并 清除 软件 失效 根源 的 过 程 
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续 表 
英文 名 称 中 文 名 称 术语 简介 
和 判定 程序 中 的 一 个 控制 点 ,在 此 处 控制 流 有 两 个 或 多 个 可 
替换 路 由 
Decision Coverage 判定 覆盖 en 
Decision Outcome 判定 结果 判定 的 取 值 ,用 来 决定 控制 流 的 走向 
本 。 一 种 用 于 表示 输入 条 件 取 值 组 合 及 与 每 一 组 合 对 应 
een Roni 和 的 输出 的 图 形 ,可 在 其 基础 上 设计 测试 用 例 
测试 软件 系统 或 组 件 的 一 个 功能 的 所 有 特性 ,但 不 测 
Depth Testing 深度 测试 试 其 所 有 功能 
半生 编程 人 员 手 工 模拟 执行 自己 编写 的 代码 并 进行 分 析 ， 
Desktop Checking 桌面 检查 以 尽 可 能 地 发 现代 码 中 的 错误 
Documentation 文档 测试 对 提交 给 用 户 的 文档 进行 的 测试 ,目的 是 提高 文档 的 
Testing ee 可 靠 性 和 易 用 性 ,降低 技术 支持 费用 
属于 增值 式 集成 测试 方式 。 从 软件 的 最 底层 组 件 向 
Down-Top Testing 自 底 向 上 测试 上 逐步 集成 ,在 集成 的 同时 进行 测试 ,直至 集成 为 符 
合 要 求 的 最 终 软 件 系统 
Dynamic Analysis 动态 分 析 根据 执行 时 的 行为 评价 一 个 软件 系统 或 组 件 
Dynamic Testing 动态 测试 通过 执行 软件 系统 或 组 件 来 对 其 进行 测试 
运行 在 特定 硬件 设备 中 的 一 种 软件 ,不 直接 与 用 户 交 
Embedded Software | 嵌入 式 软件 互 。 对 其 实时 性 .可靠 性 要 求 较 高 
De | 实体 关系 图 一 种 用 于 描述 现实 世界 中 实体 及 它们 之 间 关 系 的 图 形 
agr: 
g 组 件 输入 或 输出 域 的 一 个 部 分 ,在 该 部 分 中 ,组 件 的 
Equivalence Class 等 价 类 行为 从 规格 上 看 是 相同 的 
Equivalence 等 价 类 划分 一 种 测试 用 例 设计 方法 ,对 某 组 件 划 分 出 等 价 类 ,从 
Class Partition 和 等 价 类 中 选择 代表 性 数据 作为 测试 用 例 
Error 错误 IEEE 的 定义 是 : 一 个 人 为 产生 不 正确 结果 的 行为 
一 种 测试 用 例 设计 方法 ,根据 测试 人 员 的 经 验 推测 系 
Error Guessing 错误 推测 统 或 组 件 中 可 能 出 现 问题 的 地 方 ,有 针对 性 地 设计 测 
试用 例 
下 xception 异常 /例外 一 个 引起 正常 程序 执行 挂 起 的 事件 
a 一 种 语句 ,在 被 编译 后 会 转换 成 目标 代码 ,程序 运行 
Executable Statement | 可 执行 语句 时 会 被 执行 , 且 可 能 对 程序 中 的 数据 产生 动作 
§ a 对 于 黑 盒 测试 ,测试 系统 或 组 件 的 所 有 输入 条 件 取 值 
a 组 合 :对 于 自 全 测试 ,测试 组 件 中 所 有 路 径 
Failure 失效 软件 的 行为 与 其 期 望 的 行为 相 背离 
Fault 故障 在 软件 中 一 个 错误 的 表现 
Fault Tolerance 容错 性 测试 通过 构造 一 些 不 合理 的 输入 引诱 软件 出 错 ,检测 软件 


Testing 


的 容错 能 力 


ps 软件 测试 


续 表 
英文 名 称 中 文 名 称 术语 简介 
Feasible Path 可 达 路 径 通过 设置 输入 条 件 取 值 执行 到 的 路 径 
也 称 为 行为 测试 ,其 测试 一 个 软件 系统 或 组 件 的 特性 
Functional Testing 功能 测试 和 可 操作 行为 以 确认 它们 满足 需求 规格 说 明 中 的 相 
关 功 能 需求 
一 种 介 于 白 盒 测试 和 黑 盒 测试 之 间 的 测试 , 它 基于 组 
I 灰 盒 测 试 件 运行 的 外 部 表现 同时 又 结合 其 内 部 逻辑 来 设计 测 
0 试用 例 。 一 般 认为 ,集成 测试 阶段 采用 的 测试 策略 近 
似 于 灰 盒 测试 
High-frequency 高 频 集 成 同步 于 软件 开发 过 程 ,每 隔 一 段 时 间 对 开发 团队 的 现 
Integration 有 代码 进行 一 次 集成 测试 
一 种 集成 测试 策略 ,组 件 逐 渐 被 集成 到 系统 中 直至 形 
Incremental Testing | 增值 式 测试 成 完整 的 软件 ,在 集成 的 过 程 中 进行 测试 而 非 一 次 性 
地 测试 
Infeasible Path 不 可 达 路 径 不 可 能 通过 任何 输入 条 件 取 值 执行 到 的 路 径 
Installation Testing 安装 测试 对 软件 系统 可 安装 性 的 测试 
在 程序 中 插入 额外 的 代码 以 获得 程序 在 执行 时 行为 
Instrumentation 插 桩 二 
的 信息 
Instrumenter 插 桩 器 执行 插 桩 的 工具 
feat 集成 测试 一 般 在 单元 测试 之 后 进行 ,目的 是 确保 集成 到 一 起 的 
让 各 组 件 能 共同 完成 预期 的 功能 ,并 达到 要 求 的 性 能 
. 性 能 测试 的 一 种 :目的 是 找 出 因应 用 系统 中 资源 不 足 
Intensity Testing 强度 测试 或 资源 争 用 而 导致 的 错误 
ee 接口 分 析 A 
Interface Testing 接口 测试 对 组 件 之 间接 口 正 确 性 的 测试 
Invalid Input 无 效 输入 在 组 件 功 能 输入 域 之 外 的 输入 数据 
Job 工作 一 个 用 户 定义 要 计算 机 完成 的 工作 单元 
对 系统 施加 越 来 越 大 的 负载 ,综合 分 析 交 易 执行 指标 
Load Testing 负载 测试 和 资源 监控 指标 ,评测 和 评估 应 用 系统 在 不 同 负载 下 
的 性 能 ,以 定位 性 能 瓶颈 ,优化 系统 性 能 
测试 软件 本 地 化 版 本 的 质量 ,测试 的 内 容 主要 是 软件 
Localization Testing | 本 地 化 测试 本 地 化 后 的 界面 布局 和 软件 翻译 的 语言 质量 
Logic-coverage 逻辑 覆盖 测试 通过 分 析 程 序 的 内 部 逻辑 结构 并 考虑 对 其 覆盖 程度 
Testing i 来 设计 测试 用 例 的 方法 
ee 软件 系统 或 组 件 可 被 修改 的 容易 程度 ,这 个 修改 一 般 
te a 是 由 于 缺陷 纠正 .性 能 改进 、 特 性 增加 等 引起 的 
Mattoo 可 维护 性 测试 对 软件 系统 或 组 件 可 维护 性 的 测试 
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续 表 
英文 名 称 中 文 名 称 术语 简介 
Ss 即 Mean Time between Failures。 两 次 失效 之 间 的 平 
MTBF 平均 无 故障 时 间 均 操作 时 间 
平均 修复 时 间 即 Mean Time to Repair。 修 理 和 恢复 失效 系统 的 平 
均 时 间 
Negative Testing 逆向 测试 /负面 测试 | 针对 违反 需求 规格 的 情况 设计 测试 用 例 
Operational Testing | 可 操作 人 性 测试 在 软件 系统 或 组 件 操作 的 环境 中 评价 其 表现 
Bs 滑 路 径 一 个 组 件 从 入 口 到 出 口 的 由 若干 可 执行 语句 构成 的 
语句 执行 序列 
i 即 Procedure Design Language。 是 用 来 描述 模块 内 部 
册 et 算法 设计 和 加 工 细节 的 非 正式 语言 ,是 一 种 伪 码 
评价 一 个 软件 系统 或 组 件 与 性 能 需求 是 否 符合 的 测 
Performance Testing | 性 能 测试 试 ,包括 负载 (压力 ) 测 试 、 强 度 测试 .容量 测试 ,疲劳 测 
5 了 目的 在 于 在 软件 开发 中 验证 系统 在 真实 硬件 和 客户 
Pilot Testing 引导 测试 基础 上 处 理 典 型 操作 的 能 力 
= 引 北 定 或 软 pr 
Portability Testing 可 移植 性 测试 I 上 的 
Pseudo-random 伪 随 机 看 似 随 机 ,实际 上 是 根据 预先 安排 的 顺序 进行 的 
即 Quality Assurance。 监 控 公司 质量 保证 体系 的 运行 
QA 质量 保证 状况 ,审计 项 目的 实际 执行 情况 和 公司 规范 之 间 的 差 
异 , 并 出 具 改 进 建议 和 统计 分 析 报 告 
即 Quality Control。 对 每 一 个 阶段 或 者 关键 点 的 产 出 
QC 质量 控制 物 (工件 ) 进 行 检 测 ,评估 产 出 物 是 否 符合 预计 的 质量 
要 求 .对 产 出 物 的 质量 负责 
Recoverability 恢复 性 测试 将 软件 置 于 极端 的 条 件 下 ,或 者 是 模拟 的 极端 条 件 下 
Testing 迫使 其 产生 故障 ,检测 其 恢复 正常 工作 状态 的 能 力 
Ro edng 回归 测试 为 验证 对 软件 引入 的 修改 的 正确 性 及 其 影响 而 进行 
的 测试 
Reliability 可 靠 性 在 一 定 的 环境 下 ,系统 不 发 生 故障 的 概率 
Requirements- 二 本 3 hs 根据 软件 系统 或 组 件 的 需求 规格 导出 测试 用 例 的 测 
based Testing 基于 需求 的 测试 试 设计 方法 
Revi 评审 在 软件 开发 过 程 中 ,把 阶段 性 的 软件 配置 提交 给 开发 
i 人 员 、 用 户 ,管理 者 等 进行 评价 ,审批 的 过 程 
Risk 风险 不 期 望 效果 的 可 能 性 和 严重 性 的 一 个 度量 
’ 目的 在 于 检测 软件 在 异常 情况 下 能 继续 正常 运行 的 
i el nl 能 力 。 包 括 容错 性 测试 和 恢复 性 测试 
Sanity Testing 健全 测试 参看 冒 烟 测 试 (Smoke Testing) 


入 


续 表 
英文 名 称 中 文 名 称 术语 简介 
即 Software Configuration。 是 软件 生存 周期 各 阶段 产 
SC 软件 配置 生 的 各 种 形式 和 各 个 版 本 的 文档 程序. 数据 及 环境 
的 集合 
即 Software Development Plan。 是 指 管理 软件 项 目的 
SDP 软件 开发 计划 全 面 计划 
Security 安全 性 参看 计算 机 系统 安全 性 (Computer System Security) 
Security Testing 安全 性 测试 验证 系统 是 否 达到 安全 性 目标 的 测试 
Sl 模拟 使 用 另 一 个 系统 来 表示 一 个 物理 或 逻辑 的 系统 的 特 
- 定 行为 特性 
> 即 Service Level Agreement。 服 务 提供 商 和 客户 之 间 
上 的 一 种 协议 ,用 于 规定 提供 的 服务 级 别 
是 一 种 典型 的 初始 测试 , 它 对 一 个 新 的 软件 版 本 的 主 
Smoke Testing 冒 烟 测试 要 功能 成 分 进行 简单 的 测试 ,以 判断 其 能 否 进行 后 续 
的 正式 测试 
又 称 软件 发 布 。 指 软件 的 第 一 个 版 本 通过 彻底 的 测 
i sie 试 .形成 产品 .交付 给 客户 的 阶段 
是 用 于 分 析 、 设 计 、 实 现 、 与 维护 软件 系统 的 一 组 规范 
Software Engineering | 软件 工程 和 方法 , 它 指导 着 软件 开发 人 员 以 工程 化 的 手段 规范 
地 开发 高 质量 的 软件 
Software Life Cycle | 软件 生命 周期 ea 
Sols 是 对 软件 开发 项 目 、 过 程 及 其 产品 进行 数据 定义 、 收 
i oat 软件 度量 集 及 分 析 的 持续 量化 过 程 ,以 对 项 目 质量 .过 程 质量 
ee 及 产品 质量 进行 理解 .预测 、 评 估 、 控 制 和 改善 
IEEE 的 定义 是 : 系统 .部 件 或 过 程 满足 顾客 或 者 用 户 
Software Quality 软件 质量 需要 或 期 望 的 程度 ;系统 、 部 件 或 过 程 满足 规定 需求 
的 程度 
Skt Test 主要 包括 测试 计划 、 测 试 设计 、 测 试用 例 、 测 试 规程 、 
ee 软件 测试 文档 测试 事件 报告 .测试 总 结 报告 等 。 它 为 软件 测试 项 目 
oe 的 组 织 , 规 划 和 管理 提供 了 一 个 架构 
Source Code 源 代码 可 输入 到 编译 器 或 其 他 转换 设备 上 调试 运行 的 代码 
Specification 规格 用 于 定义 系统 或 组 件 的 功能 ,性 能 及 其 他 特性 的 文档 
SPP 软件 项 目 计 划 参看 软件 开发 计划 (SDP) 
即 Software Quality Assurance。 是 CMM 第 2 级 中 的 
一 个 关键 过 程 域 ,其 目的 是 向 管理 者 提供 全 面 监 控 软 
人 件 过 程 的 手段 ,验证 软件 产品 和 活动 是 否 符合 相应 的 
规程 和 标准 ,并 给 出 统计 分 析 报 告 和 改进 建议 
SQL 结构 化 查询 语言 即 Structured Query Language。 一 种 用 于 关系 数据 库 


中 查询 和 处 理 数据 的 语言 
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续 表 
英文 名 称 中 文 名 称 术语 简介 
A 状态 软件 对 象 在 其 生命 周期 内 满足 特定 条 件 的 存在 ,在 此 
ee 条 件 下 ,对 象 能 执行 特定 的 动作 或 等 待 事件 的 发 生 

用 来 描述 一 个 特定 对 象 的 所 有 可 能 状态 以 及 引起 状 
State Diagram 状态 图 态 转移 的 事件 ,表示 单个 对 象 在 其 生命 周期 中 的 全 部 

行为 
Th | 状态 转换 测试 根据 状态 间 的 转换 来 设计 测试 用 例 的 方法 
SR 语句 语句 是 程序 的 基本 单位 之 一 ,是 程序 具体 操作 内 容 的 
体现 ,一 般 每 条 语句 以 分 号 结尾 
Statement Coverage | 语句 覆盖 he i 
Static Analysis 静态 分 析 对 被 测 对 象 的 逻辑 .语法 等 进行 分 析 , 但 并 不 执行 它 
Static Testing 静态 测试 通过 静态 分 析 而 非 动 态 执行 完成 对 系统 或 组 件 的 测试 
Stress Testing 压力 测试 参看 负载 测试 (Load Testing) 


Structural Test Case 


结构 化 测试 用 例 


参看 逻辑 覆盖 测试 (Logic-coverage Testing) 


Design 设计 
Structural Testing 结构 化 测试 参看 逻辑 覆盖 测试 (Logic-coverage Testing) 
页 sl 一 种 传统 的 设计 方法 ,要 点 是 : 使 用 独立 功能 . 单 人 
Structured Design 结构 化 设计 口 单 出口 的 模块 ; 自 顶 而 下 .逐步 求 精 
结构 化 编程 依照 结构 化 设计 的 结果 ,用 结构 化 编程 语言 进行 的 
rogramming 编程 
tl 桩 为 一 个 软件 模块 的 框架 ,用 来 在 开发 或 测试 中 代替 当 
前 模块 的 子 模块 
Symbolic Evaluation | 符号 评价 参考 符号 执行 (Symbolic Execution) 
通过 符号 表达 式 来 执行 程序 路 径 的 一 种 静态 分 析 技 
Symbolic Execution | 符号 执行 术 。 其 中 ,程序 的 执行 用 符号 来 模拟 ,例如 ,使 用 变量 
名 而 不 是 实际 值 ,程序 的 输出 被 表示 成 包含 这 些 符号 
的 逻辑 或 数学 表达 式 
Syntax Testing 语法 分 析 根据 语法 验证 组 件 的 测试 用 例 设 计 方法 
reporti 系统 集成 ee ,直至 成 为 一 个 完整 的 
将 开发 出 的 软件 ,作为 基于 整个 计算 机 系统 的 一 个 元 
人 系统 测试 素 , 在 实际 运行 环境 下 或 模拟 系统 运行 环境 下 ,测试 
这 其 与 系统 中 其 他 元 素 能 否 实现 正确 地 连接 ,以 满足 需 
求 规格 
即 Test-Driven Development。 强 调 通 过 测试 来 推动 整 
个 开发 的 进行 , 即 在 明确 要 实现 某 个 功能 后 ,首先 编 
TDD 测试 驱动 开发 写 对 该 功能 的 测试 代码 ,接着 编写 相关 的 代码 满足 这 


些 测试 代码 ,然后 循环 添加 其 他 功能 ,直到 实现 全 部 
功能 


软件 测试 
2 续 表 


英文 名 称 中 文 名 称 术语 简介 
为 特定 目标 开发 的 一 组 测试 输入 执行 条 件 和 预期 结 
Test Case 测试 用 例 果 , 其 目的 是 测试 程序 中 的 某 路 径 , 或 核实 程序 或 软 
件 能 否 完成 某 个 特定 的 功能 
Test Case Suite 测试 用 例 套 对 应 于 被 测 软件 某 功能 或 特性 的 多 个 测试 用 例 的 集合 
Tel Op 测试 比较 器 比较 系统 或 组 件 执行 用 例 的 实际 
Tt Completion | 测试 完成 标准 用 于 确定 被 计划 的 测试 何 时 完成 的 标准 
Criterion 
Test Environment 测试 环境 测试 用 例 运 行 于 其 上 的 软件 、 硬 件 及 网 络 环境 
Test Log 测试 日 志 关于 测试 执行 的 所 有 相关 细节 的 时 间 记 录 
ee 测试 计划 一 种 测试 文档 ,用 于 描述 测试 活动 的 范围 方法、 资源 
和 进度 
四 规定 对 于 运行 系统 和 执行 指定 的 测试 用 例 来 实现 有 
Test Procedure 测试 规程 关 测 试 设计 所 要 求 的 所 有 步骤 
pe 对 每 个 测试 ,明确 地 记录 被 测 系统 或 组 件 的 标识 ,版 
Test Records 测试 记录 本 .测试 规格 和 执行 结果 
Test Report 测试 报告 一 种 用 于 描述 系统 或 组 件 执行 的 测试 和 结果 的 文档 
是 一 个 特定 测试 对 应 的 一 系列 指令 (及 数据 ), 这 些 指 
Test Script 测试 脚本 令 可 以 被 测试 工具 自动 执行 
We 一 种 文档 ,用 于 指定 对 系统 或 组 件 的 特性 或 特性 组 合 
Test Specification 测试 规格 的 测试 方法 及 测试 用 例 
Test Strategy 测试 策略 用 于 描述 测试 的 目标 和 大 致 方法 
Test Suite 测试 套 参看 测试 用 例 套 (Test Case Suite) 
a 一 个 系统 或 组 件 有 利于 测试 标准 建立 和 验证 这 些 标 
Testability 可 测试 性 准 是 否 被 满足 的 程度 
使 用 人 工 或 自动 的 手段 来 运行 或 测定 某 个 软件 系统 
Testing 测试 的 过 程 ,其 目的 在 于 检验 它 是 否 满足 规定 的 需求 或 弄 
清 预期 结果 与 实际 结果 之 间 的 差别 
Testing Item 测试 项 作为 测试 对 象 的 工作 版 本 
属于 增值 式 集成 测试 方式 。 从 软件 的 最 顶层 组 件 向 
Top-Down Testing 自 顶 向 下 测试 下 逐步 集成 ,并 在 集成 的 过 程 中 进行 测试 ,直至 集成 
为 符合 要 求 的 最 终 软 件 系统 
即 Unified Modeling Language。 是 一 种 定义 良好 、 功 
UML 统一 建 模 语 言 能 强大 的 面向 对 象 建 模 语 言 , 它 适用 于 面向 对 象 软件 
开发 的 全 过 程 
Uninstallation Testing | 卸载 测试 对 软件 系统 可 务 载 性 的 测试 
Unit Testing 单元 测试 对 软件 中 单个 组 件 的 测试 


Usability Testing 可 用 性 测试 对 用 户 使 用 产品 的 容易 程度 的 测试 


附录 A 常见 的 软件 测试 术语 


续 表 
英文 名 称 中 文 名 称 术语 简介 
人 用 户 界面 测试 目的 在 于 测试 用 户 界面 的 正确 性 、 易 用 性 和 视觉 效果 
ee 目的 在 于 判断 开发 的 系统 或 组 件 可 香 追 涛 到 用 户 的 


需求 ,以 检验 系统 或 组 件 功能 及 其 他 特性 的 有 效 性 


目的 在 于 检查 已 实现 的 软件 系统 是 否 满足 了 需求 规 


Validation Testing 确认 测试 格 说 明 书 中 规定 的 各 种 需求 ,以 及 软件 配置 是 否 完全 
正确 
Verificati 验证 目的 在 于 检验 系统 或 组 件 是 否 实现 了 预先 定义 的 功 
erllication 能 及 其 他 特性 
a Re 容量 测试 目的 在 于 使 系统 承受 超额 的 数据 容量 来 确定 系统 的 


容量 瓶颈 ,进而 优化 系统 的 容量 处 理 能 力 


是 一 种 非 正式 的 同行 评审 手段 , 走 查 小 组 人 员 设 计 一 
批 有 代表 性 的 测试 用 例 , 依 照 程 序 的 逻辑 人 工地 执行 
它们 ,记录 变量 在 运行 过 程 中 的 状态 ,以 分 析 程 序 的 
逻辑 正确 性 


Walkthrough 走 查 


在 清楚 组 件 内 部 逻辑 结构 和 处 理 过 程 的 前 提 下 ,检查 


te 组 件 内 部 结构 是 否 达 到 了 预期 设计 要 求 


即 eXtreme Programming。 是 以 构造 符合 客户 需要 的 
软件 为 目标 的 方法 论 , 使 开发 者 能 够 更 有 效 地 响应 客 
RP 极限 编程 户 的 需求 变化 ;突出 了 人 在 软件 开发 过 程 中 的 作用 ; 
属于 轻 量 级 的 方法 ,认为 文档 、 架 构 不 如 编程 直接 、 
有 效 


附录 B 


优秀 的 测试 站 点 资源 


网 址 


简 介 


http: //bdonline. sqe. com/ 


一 个 关于 网 站 测试 方面 的 网 页 


http: //citeseer. nj. nec. com/ 


一 个 丰富 的 电子 书库 , 且 提 供 著作 的 相关 文档 参考 和 下 载 


http: //groups. yahoo. com/group/ 
LoadRunner 


性 能 测试 工具 LoadRunner 的 一 个 论坛 


http: //rexblackconsulting. 
com/ Pages/publications. htm 


Rex Black 的 个 人 主页 ,有 一 些 测 试 和 测试 管理 方面 的 资料 可 供 
下 载 


http: 
homepage. html 


//satc. gsfc. nasa. gov/ 


软件 保证 中 心 是 美国 国家 宇航 局 (NASA) 投 资 设立 的 一 个 软件 可 
靠 性 和 安全 性 研究 中 心 ,研究 包括 了 度量 、 工 具 、 风 险 等 各 个 方面 


http: //seg. iit. nrc. ca/English/ 
index. html 


加 拿 大 的 一 个 研究 软件 工程 质量 方面 的 组 织 , 可 以 提供 研究 论文 
的 下 载 


http: //sepo. nosc. mil 


内 容 来 自 美国 SAN DIEGO 的 软件 工程 机 构 (Software 
Engineering Process Office) 主 页 ,包括 软件 工程 知识 方面 的 资料 


http: //www. asq. org/ 


世界 上 最 大 的 质量 团体 组 织 之 一 ,有 丰富 的 论文 资源 ,但 是 收费 


http: //www. benchmarkreso- 


urces. com/ 


提供 有 关 标 杆 方面 的 资料 ,也 有 一 些 其 他 软件 测试 方面 的 资料 


http: //www. betasoft. com/ 


包含 一 些 流行 测试 工具 的 介绍 .下 载 和 讨论 ,还 提供 测试 方面 的 
资料 


http: //www. ce. gatech. edu/ 


aristotle/ 


Aristotle 研究 组 织 , 研 究 软 件 系 统 分 析 、 测 试 和 维护 等 方面 的 技 
术 , 在 测试 方面 的 研究 包括 了 回归 测试 测试 套 最 小 化 、 面 向 对 象 
软件 测试 等 内 容 ,该 网 站 有 丰富 的 论文 资源 可 供 下 载 


http: //www. computer. org/ 


IEEE 的 电子 图 书馆 ,有 丰富 的 计算 机 方面 的 论文 资料 


http: //www. cs. york. ac. uk/ 
testsig/ 


约克 大 学 的 测试 专业 兴趣 研究 组 网 页 ,有 比较 丰富 的 资料 下 载 ， 
内 容 涵 盖 了 测试 的 多 个 方面 ,包括 测试 自动 化 ` 测 试 数据 生成 、 面 
向 对 象 软件 测试 .验证 确认 过 程 等 


http: //www. esi. es/en/main/ 


ESI( 欧 洲 软 件 组 织 ) ,提供 包括 CMM 评估 方面 的 各 种 服务 


http: //www. europeindia. org/ 
cd02/index. htm 


一 个 可 靠 性 研究 网 站 ,有 可 靠 性 方面 的 一 些 资料 提供 参考 


网 址 


附录 B 优秀 的 测试 站 点 资源 Se 


续 表 
简 介 


http: //www. fortest. org. uk/ 


一 个 测试 研究 网 站 ,研究 包括 了 静态 测试 技术 (如 模型 检查 、 理 论 
证 明 ) 和 动态 测试 (如 测试 自动 化 、 特 定 缺陷 的 检查 、 测 试 有 效 性 
分 析 等 ) 


http: //www. grove. co. uk/ 


一 个 有 关 软 件 测试 和 咨询 机 构 的 网 站 ,有 一 些 测 试 方面 的 课程 和 
资料 供 下 载 


http: //www. hq. nasa. gov/office/ 
codeq/ relpract/ prcls-23. htm 


NASA 可 靠 性 设计 实践 资料 


http: //www. io. com/ ~ wazmo/ 


Bret Pettichord 的 主页 ,其 中 一 个 热点 测试 页 面 连接 非常 有 价值 ， 
从 中 可 以 获得 相当 大 的 测试 资料 


http: //www. iso. ch/iso/en/ 
ISOOnline. frontpage 


国际 标准 化 组 织 , 提 供 包括 ISO 标准 系统 方面 的 各 类 参考 资料 


http: // www. isse. gmu. edu/faculty/ 
ofut/ classes/ 821-ootest/ papers. html 


提供 面向 对 象 和 基于 构架 的 测试 方面 著作 的 下 载 


http: //www. ivv. nasa. gov/ 


NASA 设立 的 独立 验证 和 确认 机 构 , 该 机 构 提 出 了 软件 开发 的 全 
面 验 证 和 确认 ,在 此 可 以 获得 这 方面 的 研究 资料 


http: //www. kaner. com/ 


著名 的 测试 专家 Cem Kaner 的 主页 ,里 面 有 许多 关于 测试 的 专题 
文章 


http: //www. library. cmu. edu/ 
Research/ Engineering AndScien- 
ces/CS+ECE/index. html 


卡耐基 。 梅 隆 大 学 网 上 图 书馆 ,有 大 量 的 计算 机 方面 论文 资料 


http: //www. loadtester. com/ 


一 个 性 能 测试 方面 的 网 站 ,提供 有 关 性 能 测试 .性 能 监控 等 方面 
的 资源 


http: //www. mtsu. edu/~ 


storm/ 


软件 测试 在 线 资源 .包括 提供 目前 有 哪些 人 在 研究 测试 ,测试 工 
具 列 表 链 接 ,测试 会 议 ,测试 新 闻 和 讨论 ,软件 测试 文学 (包括 各 
种 测试 杂志 .测试 报告 ), 各 种 测试 研究 组 织 等 内 容 


http: //www. psqtcomference. 
com/ 


实用 软件 质量 技术 和 实用 软件 测试 技术 国际 学 术 会 议 宣传 网 站 


http: //www. com/ 


front. htm 


qacity. 


测试 工程 师资 源 网 站 .包含 各 种 测试 技术 及 相关 资料 下 载 


http: //www. qaforums. com/ 


关于 软件 质量 保证 方面 的 一 个 论坛 ,需要 注册 


http: //www. qaiusa. com/ 


QAI 是 一 个 提供 质量 保证 方面 咨询 的 国际 著名 机 构 ,提供 各 种 质 
量 和 测试 方面 的 证 书 认 证 


http: //www. qualitytree. com/ 


一 个 测试 咨询 提供 商 ,有 一 些 测 试 可 供 下 载 ,有 几 篇 关于 缺陷 管 
理 方面 的 文章 值得 参考 


http: //www. rational. com/ 


IBM Rational 的 官方 网 站 ,可 在 这 里 寻找 测试 方面 的 工具 信息 


http: //www. riceconsulting. 


com/ 


一 个 测试 咨询 提供 商 . 有 一 些 测试 资料 可 供 下 载 ,但 不 多 


http: //www. satisfice. com/ 


包含 James Bach 关于 软件 测试 和 过 程 方面 的 很 多 论文 ,尤其 在 启 
发 式 测试 策略 方面 值得 参考 


a 软件 测试 


网 址 


续 表 
简 介 


http: //www. satisfice. com/ 


seminars. shtml 


一 个 黑 盒 软件 测试 方面 的 研讨 会 ,主要 由 测试 专家 Cem Kanar 和 
James Bach 组 织 


http: //www. sdmagazine. com/ 


软件 开发 杂志 ,经 常会 有 一 些 关 于 测试 方面 好 的 论文 资料 ,同时 
还 包括 了 项 目 和 过 程 改 进 方面 的 课题 ,并 且 定 期 有 一 些 关于 质量 
和 测试 方面 的 问题 讨论 


http: //www. sei. cmu. edu/ 


软件 工程 组 织 SEI 的 网 站 ,在 这 里 可 免费 获得 各 类 关于 软件 工程 
质量 和 测试 方面 的 资料 


http: //www. soft com/ Institute/ 
HotList/ 


提供 了 网 上 软件 质量 热点 链接 ,包括 专业 团体 组 织 链接 、 教 育 机 
构 链 接 、 商 业 咨 询 公司 链 接 、 质 量 相关 技术 会 议 链接 、 各 类 测试 技 
术 专 题 链接 等 


http: //www. softwaredioxide. 
com/ 


包括 软件 工程 (CMM,CMMI, 项 目 管理 ) .软件 测试 等 方面 的 资源 


http: //www. softwareqatest. 
com/ 


软件 质量 /测试 资源 中 心 。 该 中 心 提供 了 常见 的 有 关 测 试 方面 的 
FAQ 资料 ,各 质量 /测试 网 站 介绍 ,各 质量 /测试 工具 介绍 ,各 质 
量 /策划 书籍 介绍 ,以 及 与 测试 相关 的 工作 网 站 介绍 


http: //www. softwaretestingin- 
stitute. com 


一 个 软件 测试 机 构 ,提供 软件 质量 /测试 方面 的 调查 分 析 , 测 试 计 
划 模 板 ,测试 WWW 的 技术 ,如 何 获 得 测试 证 书 的 指导 ,测试 方面 
书籍 介绍 ,并 且 提 供 了 一 个 测试 论坛 


http: //www. sqatester. com/ 
index. htm 


一 个 包含 各 种 测试 和 质量 保证 方面 的 技术 网 站 ,提供 咨询 和 培训 
服务 ,并 有 一 些 测试 人 员 的 社团 组 织 ,特色 内 容 是 缺陷 处 理 方面 
的 技术 


http: //www. stickyminds. com/ 


提供 关于 软件 测试 和 质量 保证 方面 的 当前 发 展 信息 资料 ,论文 等 
资源 


http: //www. tantara. ab. ca/ 


软件 质量 方面 的 一 个 咨询 网 站 ,有 过 程 改进 方面 的 一 些 资料 提供 


http: //www. tcse. org/ 


IEEE 的 一 个 软件 工程 技术 委员 会 网 站 ,提供 技术 论文 下 载 ,并 有 
一 个 功能 强大 的 分 类 下 载 搜索 功能 ,可 以 搜索 到 测试 类 型 测试 
管理 、 测 试 分 析 等 各 方面 资料 


http: //www. testing. com/ 


测试 技术 专家 Brain Marick 的 主页 ,包含 了 Marick 研究 的 一 些 资 
料 和 论文 ,该 网 页 提供 了 测试 模式 方面 的 资料 


http: //www. testingcenter. 


com/ 


有 一 些 测 试 方面 的 课程 体系 


http: //www. testingconferences. 


com/asiastar/home 


著名 的 AsiaStar 测试 国际 学 术 会 议 官方 网 站 


http: //www. testingstuff. com/ 


Kerry Zallar 的 个 人 主页 ,提供 一 些 有 关 培 训 、 工 具 会议, 论文 方 
面 的 参考 信息 


http: //www. 51testing. com/ 


51Testing 软件 测试 网 ,国内 的 软件 测试 网 站 。 介 绍 测试 技术 、 测 
试 工具 ,测试 管理 软件 质量 等 方面 的 内 容 , 设 有 测试 论坛 


http: //www. testage. net/ 


测试 时 代 , 国 内 的 软件 测试 网 站 。 介 绍 测试 技术 、 自 动 测试 技术 、 
软件 质量 保证 等 方面 的 内 容 , 设 有 测试 论坛 


http: //www. uml. org. cn/ 


UML 软件 工程 组 织 . 国 内 网 站 。 全 面 介绍 软件 工程 中 的 技术 、 管 
理 理念 与 方法 工具 等 ,包含 了 软件 测试 的 内 容 
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